Senior DataOps Engineer, Datalake (AWS, Databricks)

Vous intervenez sur une brique essentielle de la stratégie data de l'entreprise. L'équipe met à disposition le stockage (S3) de toute la data platform, garantit sa robustesse et sa scalabilité, et assure la gouvernance technique du patrimoine de données ainsi que la gestion des métadonnées. Elle sensibilise aussi les utilisateurs aux bonnes pratiques d'une modern data stack, pour accompagner le développement des cas d'usage métier.

Missions

Garantir la robustesse et opérer la plateforme

• Assurer la résilience de la plateforme (plans de reprise et de continuité d'activité)

• Monitorer la plateforme de stockage et agir de façon proactive (Storage Lens, CloudTrail)

• Assurer le support et l'accompagnement sur S3, Glue et Unity Catalog

• Déployer et maintenir les ressources d'infrastructure avec Terraform, en étroite collaboration avec les équipes ops et infra centrales

Accompagner et former

• Définir et promouvoir les bonnes pratiques au sein de l'équipe

• Participer à la conception des pipelines de données des équipes et les conseiller

Développer le futur

• Mettre en place une gouvernance automatisée (registre de data contracts, gestion des accès)

• Déployer Unity Catalog et activer ses nouvelles fonctionnalités (lineage, managed tables, etc.)

Stack technique recherchée :

AWS S3

AWS Glue

HashiCorp Vault

Databricks

Unity Catalog

Terraform

AWS

GitHub CI/CD