Data Engineer Databricks

Contexte

Le rôle vise à apporter l’expertise nécessaire pour soutenir les projets data et l’écosystème Databricks au sein du groupe.

L’équipe met à disposition des environnements d’évaluation et de test, définit les standards et bonnes pratiques d’usage, et accompagne les entités ayant des besoins spécifiques sur des périodes dédiées. Les interlocuteurs sont principalement des Data Specialists et Data Citizens.

Les environnements techniques s’appuient sur Databricks AWS et Azure.

Les activités se structurent autour de trois axes :

• Data Engineering : développement et opérations data
• DevOps / DataOps : déploiement, automatisation, Infrastructure-as-Code, administration des plateformes
• Expertise : veille technologique, anticipation des évolutions, test et validation des nouvelles fonctionnalités

Missions

• Administrer, surveiller et maintenir les espaces de travail Databricks du COE.
• Élaborer, documenter et faire évoluer les standards, bonnes pratiques et blueprints groupe.
• Garantir la qualité et la conformité des services fournis aux entités.
• Accompagner les équipes métiers et data dans l’adoption de l’écosystème Databricks et leur transition vers les normes groupe.
• Tester, évaluer et recommander les nouvelles fonctionnalités de l’éditeur ou d’outils complémentaires pour améliorer l’expérience globale.
• Veiller au respect des politiques groupe et accompagner leur mise en œuvre.
• Contribuer à la conception et à la réalisation des use cases stratégiques portés par les entités.