Data Engineer – Plateforme Data Financière | Paris

Contexte

Dans le cadre d'un programme de transformation technologique au sein d'un grand acteur du secteur financier, nous recherchons un Data Engineer expérimenté pour participer au développement et au déploiement d'une plateforme de consolidation et de distribution de données financières.

Vos missions

• Concevoir et implémenter des pipelines de données ETL/ELT avec PySpark sur Databricks

• Construire et maintenir une architecture Data Lake de type médaillon (Bronze / Silver / Gold)

• Développer des jobs de transformation sur des jeux de données financiers

• Créer et maintenir des Azure Functions pour des intégrations API en temps réel avec des partenaires externes

• Mettre en place des contrôles qualité et des frameworks de tests automatisés

• Travailler avec Delta Lake pour un stockage de données conforme ACID

• Développer des APIs RESTful en Python pour la distribution de données

• Optimiser les performances des jobs Spark et des fonctions serverless

• Collaborer avec les équipes métier consommatrices de données

• Travailler dans un environnement CI/CD sous Azure DevOps

Profil recherché

Expérience de 5 ans minimum en Data Engineering.

Compétences techniques attendues :

• Python niveau avancé

• PySpark pour le traitement distribué

• SQL pour la transformation et l'analyse de données

• Delta Lake

• Azure : Databricks, Azure DevOps, Function App, Azure Pipelines

• Outils de qualité de code : ruff, mypy, black, pre-commit hooks

• Tests unitaires avec pytest

• Git et stratégies de branching

Expérience métier

Une expérience dans les services financiers est indispensable. Une connaissance des actifs alternatifs ou de la gestion de patrimoine constitue un véritable atout.

Conditions

• Localisation : Paris

• Télétravail : 50%