Tech Lead Databricks

Contexte de la mission

Dans le cadre de la construction d'une plateforme de pilotage de la performance pour un acteur international de l'énergie, nous recherchons un Tech Lead expérimenté pour piloter l'architecture technique, le développement et la mise en production des pipelines sur Databricks.

Responsabilités principales

• Définir et challenger l'architecture cible de la plateforme Data

• Piloter la conception, l'industrialisation et l'orchestration des pipelines sur Databricks (PySpark, Delta Lake, Unity Catalog)

• Encadrer les développeurs Databricks (revue de code, CI/CD, bonnes pratiques)

• Optimiser la performance, la scalabilité et la qualité de la donnée

• Mettre en œuvre la gouvernance data, la sécurité, les rôles et les standards d'accès

• Collaborer avec les équipes DataOps, Data Analyst & Métier

• Participer activement à l'adoption de la plateforme par les équipes locales

Stack technique

• Databricks / PySpark / Delta Lake / Unity Catalog

• Azure / GitLab CI / Terraform / Lakehouse

• Intégration & monitoring : Power BI, Airflow, dbt (souhaité)

• Sujets liés : sécurité, RGPD, metadata, gestion de rôles

Profil recherché

• Expérience significative en tant que Tech Lead / Data Engineer senior

• Expertise Databricks (architecture, ingestion, optimisation, gouvernance)

• Excellente culture DevOps (CI/CD, monitoring, infra-as-code)

• Leadership technique, encadrement d'équipe, communication claire

• Anglais professionnel requis (rédaction, réunions, workshops)

• Bonus : expérience multi-pays ou projets d'entreprise sur la donnée

Livrables attendus

• Pipelines robustes documentés et automatisés (CI/CD GitLab)

• Roadmap technique et arbitrages d'architecture

• Documentation (architecture, sécurité, gouvernance)

• Support technique aux Data Analysts et Data Stewards

• Suivi de l'adoption des outils dans les BU locales

Dans le cadre de la construction d'une plateforme de pilotage de la performance pour un acteur international de l'énergie, nous recherchons un Tech Lead expérimenté pour piloter l'architecture technique, le développement et la mise en production des pipelines sur Databricks.