Data Engineer Big Data

Contexte

Dans le cadre du renforcement d'une plateforme de données à forte volumétrie, nous recherchons un Data Engineer confirmé pour intervenir sur des sujets de développement, d'industrialisation et de maintien en conditions opérationnelles.

Vous rejoindrez une équipe technique en charge de la collecte, du traitement et de la mise à disposition de données critiques au sein d'un environnement exigeant.

Missions

• Concevoir et développer des pipelines de traitement de données
• Industrialiser les flux d'alimentation et de transformation
• Optimiser les performances des traitements batch et/ou temps réel
• Participer aux évolutions et migrations de la plateforme Data
• Assurer la qualité, la fiabilité et la sécurité des traitements
• Réaliser des analyses techniques, investigations et résolutions d'incidents complexes
• Mettre en place les bonnes pratiques de développement et d'exploitation
• Produire la documentation technique associée
• Collaborer avec les différentes parties prenantes du projet

Environnement technique

Data & Big Data

• Cloudera Data Platform (CDP)
• Hadoop
• HDFS
• HBase
• Spark
• Hive
• Impala

Data Integration & Streaming

• Kafka
• NiFi
• Sqoop

Orchestration

• Airflow
• Oozie

Développement

• Python
• Scala
• SQL
• Shell

Gouvernance & Sécurité

• Ranger
• Atlas
• Kerberos

DevOps

• Git
• Jenkins ou GitLab CI
• Docker

Modalités

• Localisation : France
• Mode de travail : Hybride
• Démarrage : Été 2026
• Durée : Mission longue
• Français courant requis
• Formation supérieure en informatique ou équivalent

1. Expérience significative en Data Engineering sur environnement Big Data
2. Maîtrise des technologies Cloudera/Hadoop
3. Solides compétences en développement Python, Scala et SQL
4. Expérience des problématiques de performance, d'industrialisation et d'exploitation
5. Capacité à intervenir aussi bien sur des activités Build que Run
6. Autonomie, rigueur et esprit d'analyse
7. Bon relationnel et capacité à travailler avec des interlocuteurs variés
8. Français courant requis
9. Formation supérieure en informatique ou équivalent