Data Engineer Data Vault

Contexte CDI ET FREELANCE

EDW2 est un entrepôt de données centralisé dans le cloud (Snowflake), modélisé selon la méthodologie Data Vault 2.0. Il couvre l'ensemble des domaines fonctionnels du groupe (Finance, Clients, Booking, Fuel & Vessels, etc.) et consolide les données de toutes les filiales à l'échelle mondiale.
À date, l'équipe projet réunit plus de 10 consultants organisés en squads fonctionnelles travaillant en méthodologie Agile/Scrum, avec des sprints de 3 semaines. Chaque squad est responsable de la conception, du développement et de la maintenance des traitements de données sur son périmètre métier.
Le Data Engineer Data Vault intervient sur la conception et l'évolution du Data Warehouse d'entreprise. Il participe à l'intégration des données, à la modélisation selon les principes Data Vault 2.0 et à la mise à disposition de données fiables pour les usages analytiques et décisionnels.

Missions

• Participer à l'analyse des besoins métiers et à la compréhension des flux de données sources.

• Identifier et qualifier les données nécessaires à l'alimentation du Data Warehouse.

• Développer et maintenir les pipelines d'ingestion et de transformation de données.

• Garantir la qualité, la cohérence et la traçabilité des données intégrées.

• Concevoir et implémenter les modèles Data Vault 2.0 (Hubs, Links, Satellites).

• Participer aux travaux d'évolution du modèle de données d'entreprise.

• Assurer le respect des standards de modélisation et des bonnes pratiques Data Vault.

• Contribuer à la conception des couches de restitution et des Data Marts destinés aux usages analytiques.

• Développer les transformations de données avec dbt.

• Mettre en œuvre les tests de qualité, de cohérence et de complétude des données.

• Participer à l'optimisation des traitements SQL et des performances Snowflake.

• Contribuer aux processus d'intégration continue et de déploiement des développements.

• Assurer le support et la maintenance corrective des traitements existants.

• Investiguer les anomalies de données et proposer des solutions pérennes.

• Participer aux activités de monitoring et de supervision des traitements.

• Contribuer à la documentation fonctionnelle et technique du Data Warehouse.

Stack technique

• Snowflake

• dbt + AutomateDV

• Data Vault 2.0

• SQL

• Git

• GitLab

• Jenkins

• Docker

• Kubernetes

• Jira / Scrum

• Confluence

• DBSchema

• Python

• Apache Airflow

1. Excellente maîtrise du SQL avancé (CTE, fonctions analytiques, optimisation de requêtes)

2. Expérience significative en modélisation décisionnelle et intégration de données

3. Bonne maîtrise de dbt (modèles, tests, documentation, macros)

4. Expérience sur Snowflake ou un moteur MPP équivalent (BigQuery, Redshift, Synapse)

5. Maîtrise de Python dans un contexte Data Engineering

6. Expérience avec des orchestrateurs de traitements (Airflow ou équivalent)

7. Maîtrise des outils de versionning Git

8. Bonne connaissance de la méthodologie Data Vault 2.0

9. Expérience de mise en oeuvre avec AutomateDV ou équivalent

10. Connaissance des méthodologies de modélisation décisionnelle (Kimball, Data Vault)

11. Expérience sur des architectures Data Cloud modernes

12. Connaissances CI/CD (GitLab, Jenkins, Docker, Kubernetes)

13. Sensibilité aux problématiques de gouvernance et de qualité des données

14. Capacité à travailler en autonomie dans un environnement international

15. Esprit analytique et sens de la résolution de problèmes

16. Excellente communication et aptitude à collaborer avec des interlocuteurs métiers et techniques

17. Anglais professionnel obligatoire (réunions, ateliers et documentation en anglais)

18. Capacité à évoluer dans un contexte Agile/Scrum

19. PLUS HABITE MARSEILLE