Data Engineer - Développeur (IT) / Freelance

Dans le cadre d'un renforcement de nos équipes chez l'un de nos clients grands comptes dans le secteur bancaire. Nous recherchons un(e) Data Engineer/ Développeur pour intervenir dans un équipe Big Data & API qui développe et gère un datalake (GTLake)

Votre objectif de mission :

• Gestion de la production
• Gestion de la dette technique
• Revoir l'architecture actuelle et proposer des évolutions
• Développements liés aux projets CASH et Trade

A noter que notre client a démarré une phase de mutation du GTLake vers une gestion en code python/spark ( afin de remplacer informatica DEI )
La prestation demande donc faire preuve d'autonomie de curiosité et de rigueur pour traiter en toute sécurité de la modernisation de nos solutions de pipeline data ( migrations de workflows informatica ou des implémentations des projets)
Ceci avec une approche moderne et industrielle.

Profil candidat:
Issu d'une formation Bac +5, vous justifiez d'au moins 5 ans d'expérience en tant que data engineer / Développeur.

Vous savez faire preuve d'autonomie de curiosité et de rigueur pour traiter en toute sécurité de la modernisation de solutions de pipeline data.

Outils :

• Spark/PySpark

• Hadoop sur infra on premise

• stockage : hdfs / parquet / iceberg /...

• Starburst/Hive/SQL/HQL

• Bash/Linux

• Jira/confluence/bitbucket - git

• Pipeline CI/CD / jenkins

• XLDeploy/XLRelease

• Aisance dans l'utilisation des outils IA