Data Engineer Big Data Confirmé H/F

Contenu de l'offre Data Engineer Big Data Confirmé H/F chez LCL

Data Engineer Big Data Confirmé H/F

Published the 02/02/2022

10 place Oscar Niemeyer 94811 VILLEJUIF Cedex - France
Information systems / IT Project management

Appartenant à la Direction Data Clients Finance et Risques, le service DAP Data Analytics & Pilotage de la Banque a la particularité d’être en interaction avec la totalité des Directions Métiers de LCL quant aux solutions et architecture à mettre en place en terme de Plate-forme Data internes et externes (Big Data, Intelligence Artificielle, Entrepôt de Données  ou Environnement Analytique sous SAS, qu’externe avec une DMP Data Management Platform), de solutions Analytics (Datavisualisation, Tableaux de Bord et Reporting de Pilotage de la Banque et particulièrement du pilotage du réseau commercial). DAP est également fortement impliqué sur la mise en place de l’architecture DataCentric du SI de LCL en relation avec les travaux Groupe CA.

Vous rejoindrez le service BigData & IA au sein du département Data Analytics et Pilotage de la direction SNI. Ce service a pour mission et responsabilité de mener à bien les projets BigData & IA afin de répondre aux besoins Métiers de LCL (industrialisation d’algorithme de machine learning, traitement de données en temps réel, exposition de données sous différentes formes, traitement de l’image…) , mais également aux besoins IT pour la mise en œuvre de son évolution d’architecture, de ses socles technologiques, d’intégration des nouvelles méthodes d’intégration continue (DevOps pour la Data), Nouveau socle BigData, Architecture Streaming, IA Engineering, Search, DataLayer... 

En tant qu’Ingénieur d’études et développement :

vous contribuerez à la construction des solutions BigData de LCL, en étroite collaboration avec les Architectes et les Business Analyst ;
vous serez au cœur de l’implémentation des nouvelles technologies au sein de LCL et plus largement du Groupe Crédit Agricole ;
vous aurez en charge le développement des solutions de collecte des données, batch et temps réel (Spark), de leur stockage et traitement au sein du cluster Hadoop (Cloudera), et de leur mise à disposition des DataScientists ;
vous mettrez en place l’architecture applicative des technologies BigData de LCL : Distribution Cloudera 6, DataIku, Kafka, Hbase, Impala, Kudu...

Vous rejoindrez une équipe pluridisciplinaire applicative et technique pour la renforcer sur le plan du développement. 

Au-delà de l’engagement sur les études et projets, vous serez force de proposition sur les choix BigData ; outils, méthodes projet, méthodes de développement, gouvernance. 

De plus, vous devrez constituer avec CA-GIP (Direction Infrastructure et Production du groupe Crédit Agricole), l’organisation et le fonctionnement en phase de Build et RUN des fonctions d’administration et de gouvernance de la plate-forme BigData.

Vous participerez aux échanges Groupe Crédit Agricole BigData. 

Vous contribuerez aux réflexions d’architecture techniques et applicatives Data.

Tous nos postes sont ouverts aux personnes en situation de handicap.

Position with management
No


Executive / Non Executive
Cadre


Minimum level of study
Postgraduate degree – MA/MSc/PhD/Doctorate or equivalent


Training / Specialization
Master ou diplôme d'ingénieur en spécialité système d'information décisionnel et/ou Big Data
Expérience de développement de projets BigData


Minimum experience level
3-5 years


Soft skills
o Capacité d'écoute et de synthèse
o Rigueur et capacité de synthèse rédactionnelle
o Capacité à travailler en équipe pluridisciplinaire et agile
o Pro Activité et Initiatives pour la construction et la valorisation des solutions BigData

o Conception et Développement de Projets (utilisation d'outils collaboratifs : GIT, Jira).

o Maîtriser l'écosystéme Data :
BigData : Hadoop Cloudera
NoSQL : Hbase, Neo4J
Streaming : Kafka
Search : ElasticSearch, SolR
DevOps : GitLab, Jenkins, Nexus


IT tools
- Connaissance des solutions BigData : Hadoop Cloudera, HDFS, Hive, Impala, Flume, Sqoop, Hbase, Kudu, Oozie
- Langage de développement : Java, Python, Scala, SQL
- Connaissance Bases de données SQL et NoSQL

LCL became part of the Crédit Agricole Group in 2003 and is now one of the largest retail banks in France. Through a network of 2,000 branches and corporate business centres, remote banking and private banking services, LCL supports six million retail and business customers. LCL is the bank used by one in three companies.