Data Engineer Microsoft Fabric

Contexte de la mission

Le client construit et industrialise une nouvelle plateforme Data sous Microsoft Fabric. L’objectif est de renforcer une équipe déjà structurée autour d’un Tech Lead avec un Data Engineer senior capable de prendre en charge des sujets complexes, tout en restant très opérationnel dans le développement.

Il ne s’agit pas d’un besoin orienté principalement Power BI ni d’une mission de cadrage ou de POC. Le consultant interviendra directement sur la construction, la migration, la fiabilisation et l’industrialisation de la plateforme Data.

• Mettre en œuvre des architectures Medallion Bronze/Silver/Gold ;

• Gérer les chargements complets et incrémentaux, les MERGE, le dédoublonnage et l’historisation des données ;

• Mettre en place des contrôles automatisés de qualité : nullité, unicité, intégrité référentielle, formats, fraîcheur et réconciliation source/cible ;

• Organiser le traitement, la traçabilité et la reprise des données rejetées ;

• Optimiser les traitements PySpark et les tables Delta : jointures, partitionnement, shuffles, data skew, petits fichiers et performances ;

• Contribuer à l’industrialisation avec Git, CI/CD et environnements Dev/Test/Prod ;

• Participer aux sujets de monitoring, sécurité, gouvernance et gestion des accès ;

• Collaborer avec le Tech Lead et les autres Data Engineers afin d’harmoniser les pratiques de développement.

Profil recherché

• Data Engineer disposant d’une séniorité confirmée sur les plateformes Data modernes ;

• Profil obligatoirement basé en France ;

• Expérience concrète, récente et significative sur Microsoft Fabric en production ;

• Maîtrise réelle de Fabric Data Factory, OneLake, Lakehouse, notebooks et PySpark ;

• Très bon niveau en Python et SQL ;

• Bonne compréhension de Delta Lake et des architectures Lakehouse/Medallion ;

• Expérience de l’industrialisation : Git, CI/CD, tests, monitoring et gestion des environnements ;

• Capacité à expliquer précisément les architectures et développements personnellement réalisés ;

• Autonomie, capacité d’analyse et posture de senior hands-on ;

• Capacité à intervenir au sein d’une équipe disposant déjà d’un Tech Lead, sans enjeu de positionnement managérial.

Une expérience complémentaire sur Databricks, Azure Data Factory, Azure Synapse, dbt ou la gouvernance Data sera particulièrement appréciée, à condition que l’expérience Microsoft Fabric soit solide et démontrable.