Data Engineer GCP DBT

Contexte

Dans le cadre du renforcement des équipes R&D d'un grand compte, nous recherchons un(e) Data Engineer pour participer à la structuration, l'ingestion et la valorisation des données métiers et scientifiques.

Vous rejoindrez une équipe dynamique pour concevoir des pipelines de données performants, développer des outils de recherche de bases de données pour les équipes opérationnelles et connecter l'écosystème aux outils d'analyse (SevenBridges).

Début de mission : ASAP
Durée : 1 an
Localisation : Hybride (Télétravail + Présentiel)

Missions

• Ingestion de données : Mettre en place et maintenir l'ingestion de données publiques et internes (scripts Python sur-mesure, Fivetran, Rclone, etc.).

• Search Data : Participer au développement d'un outil de recherche et d'exploration de bases de données à destination des équipes métiers.

• Pipelines de transformation : Concevoir et optimiser les workflows d'orchestration et de transformation de la donnée.

• Interconnexion d'outils : Assurer la connexion et le flux de données vers les plateformes d'analyse spécialisées (notamment SevenBridges).

1. Maîtrise de l'environnement Google Cloud Platform (GCP) (Cloud Run, IAM, BigQuery, GCS)

2. Solides compétences en Python et SQL

3. Expérience sur des orchestrateurs de workflows (Argo Workflows, Airflow ou équivalent)

4. Pratique de l'ingestion de flux de données variées (publiques et internes)

5. Connaissance de Terraform et dbt (montée en compétences possible)

6. Appréciés : GKE, CI/CD (GitLab CI)

7. Appréciés : Streamlit, notions UX/UI

8. Appréciés : Monitoring et alerting (Grafana)

9. Appréciés : Gouvernance (Dataplex)

10. Autonomie et capacité à évoluer dans un environnement R&D

11. Curiosité et rapidité d'apprentissage

12. Rigueur et communication claire : transparence sur le suivi des avancées et la remontée des points de blocage

13. Bonne compréhension des enjeux métiers