Dans le cadre de la modernisation et de l’industrialisation d’une plateforme Data Azure à forte volumétrie, nous recherchons un(e) Tech Lead / Senior Solution Architect Databricks pour accompagner la transformation des usages Data autour des enjeux suivants :

• Migration et industrialisation des workloads vers Databricks

• Gouvernance et qualité des données

• Optimisation des performances et des coûts cloud (FinOps)

• Accompagnement des équipes Data sur les bonnes pratiques d’architecture, de delivery et d’industrialisation

Environnement :

• Stack Azure / Databricks

• Architecture Data moderne orientée Lakehouse

Missions

Data Engineering & Architecture

• Concevoir, développer et maintenir des pipelines de données à forte volumétrie

• Participer à la structuration d’une plateforme Data moderne sous Azure Databricks

• Développer des traitements batch et streaming dans une architecture Lakehouse

• Contribuer à la définition et à l’évolution de l’architecture cible

Industrialisation & DevOps

• Industrialiser les pipelines dans une logique DevOps avancée

• Mettre en place les bonnes pratiques CI/CD, tests et automatisation des déploiements

• Fiabiliser les environnements et accompagner les mises en production

Gouvernance, Qualité & Performance

• Garantir le respect des standards techniques et des patterns d’architecture

• Participer aux sujets de gouvernance et de qualité des données

• Optimiser les performances des traitements Spark et la consommation des ressources cloud

• Contribuer aux démarches FinOps et Green IT

Support & Leadership Technique

• Participer au maintien en conditions opérationnelles de la plateforme (support N3)

• Analyser et résoudre les incidents complexes de production

• Accompagner et mentorer les équipes sur les bonnes pratiques techniques

• Animer des sujets transverses et jouer un rôle de référent technique selon la séniorité

Profil recherché

• Minimum 5 ans d’expérience en Data Engineering

• Expérience significative sur des projets de migration et transformation Databricks

• Expérience en encadrement technique, mentoring ou lead d’équipes/projets Data

• Capacité à évoluer dans des environnements complexes et industrialisés

• Capacité à intervenir en lead technique (accompagnement des équipes, mentoring, bonnes pratiques)

Expertise technique :

• Forte expertise Databricks

• Très bonne maîtrise de SQL / Spark / Scala / Python

• Maîtrise des architectures Data modernes : lakehouse, batch & streaming, big data / fast data

• Expérience Azure Cloud

• Bonne maîtrise des enjeux de gouvernance, qualité des données et optimisation des performances (est un + : maîtrise de Unity Catalog)

• Bonne maîtrise des outils CI/CD et d’industrialisation : GitLab CI, Jenkins, Terraform, Docker, Kubernetes

Certifications :

• Certification Databricks Certified Data Engineer Associate à jour

• Certification Azure Associate minimum