Data Engineer (H/F)

Contexte

Une organisation spécialisée dans la valorisation des données développe et maintient une plateforme data centralisée, sécurisée et fiable.
Cette plateforme repose notamment sur un datalake cloud et des outils de transformation de données.

L’équipe fonctionne en mode agile et collabore avec différents métiers (BI, Data Science, Data Analyse, équipes produit).

Missions principales

a. Maintien en conditions opérationnelles

• Assurer la disponibilité des données et des services

• Répondre aux demandes d’analyse ou d’extraction de données

• Identifier et corriger les anomalies

• Faire évoluer les traitements existants

• Garantir la qualité des données

• Communiquer avec les utilisateurs de la plateforme

b. Conception et développement

• Mettre en place des flux de données (collecte, transformation, diffusion)

• Concevoir des modèles de données

• Développer des pipelines de traitement

• Réaliser les tests (unitaires et d’intégration)

• Assurer la qualité du code (revues de code)

• Gérer l’ordonnancement et les dépendances des traitements

• Déployer les solutions sur différents environnements

• Documenter les développements

Profil recherché

Expérience

• Minimum 5 ans d’expérience en ingénierie data

• Expérience sur des volumes de données importants

Compétences techniques

• Spark (Scala), Python, SQL

• Environnements cloud (AWS : S3, EMR, EKS, EC2, Lambda, Athena)

• Outils data (Dataiku, Kafka, Airflow)

• Versioning et CI/CD (GitLab, Maven)

• Infrastructure as Code (Terraform)

• Manipulation de formats de données variés (CSV, JSON, XML, Parquet)

Compétences transverses

• Bonne compréhension des enjeux data, performance et sécurité

• Travail en méthodologie agile (Scrum / SAFe)

• Capacité à collaborer avec des profils variés

• Communication claire, y compris avec des non-techniciens

• Rigueur (documentation, suivi, traçabilité)

• Esprit d’équipe et partage des connaissances

• Capacité d’adaptation et gestion des priorités