Contexte de la mission

Dans le cadre d'un programme stratégique de transformation de la plateforme Data du client, deux Data Engineers Experts sont recherchés pour intervenir sur la conception, le développement et l'industrialisation de pipelines de données en environnement AWS. Les consultants évolueront dans un contexte exigeant nécessitant une forte autonomie, une excellente maîtrise des bonnes pratiques de développement et une capacité à concevoir des solutions robustes, scalables et maintenables. Ils participeront également à l'amélioration continue du socle technique et accompagneront les équipes sur les standards de qualité.

Environnement de travail

• Localisation : Paris

• Temps plein

• Date de démarrage : 03/08/2026

• Langues de travail : Français et Anglais courant (documentation technique rédigée en anglais)

• Environnement technique : AWS, Python, Amazon S3, architectures Big Data (Medallion, Lambda), CI/CD

Détails de la mission

Missions principales

Objectifs

• Concevoir et développer des solutions Data robustes et évolutives.

• Industrialiser les traitements de données sur une plateforme cloud AWS.

• Garantir la qualité, la performance et la maintenabilité des pipelines de données.

• Accompagner les équipes dans l'application des bonnes pratiques de développement et d'architecture.

Finalités

• Assurer une collecte, une transformation et une diffusion fiables des données.

• Construire un référentiel de données standardisé répondant aux besoins métiers.

• Renforcer la résilience et l'observabilité de la plateforme Data.

• Participer à l'amélioration continue des processus et des outils de développement.

Attributions

Tâches & activités principales

• Recueillir, analyser et challenger les besoins métiers afin de proposer des solutions adaptées et scalables.

• Concevoir et développer des pipelines d'ingestion et de transformation de données en Python.

• Mettre en œuvre des architectures de stockage et de traitement sur Amazon S3 en suivant les principes Bronze / Silver / Gold (architecture Medallion).

• Déployer des modèles Big Data intégrant les concepts de Lambda Architecture, partitionnement, bucketing et design by query.

• Développer et maintenir des APIs en respectant les principes de clean code et de qualité logicielle.

• Industrialiser les développements via des pipelines CI/CD, des tests automatisés, des mécanismes de monitoring et d'alerting.

• Identifier et résoudre les incidents de production ainsi que les problèmes de performance.

• Participer à l'encadrement technique des développeurs et diffuser les bonnes pratiques.

• Produire et maintenir la documentation technique en anglais.

Livrables attendus

• Développements applicatifs et livraison des codes sources.

• Spécifications Techniques Génales (STG).

• Estimations de charges et de complexité des développements.

• Documentation technique en anglais.

• Tableaux de bord de suivi, de monitoring et de correction des anomalies.

• Frameworks et composants d'industrialisation (CI/CD, supervision, alerting).

Expérience

• 6 à 9 ans d'expérience en Data Engineering ou développement Big Data.

• Expérience significative dans des environnements cloud AWS et sur des plateformes de données à grande échelle.

Compétences techniques

• Excellente maîtrise de Python et du développement d'APIs.

• Solide expérience des architectures AWS.

• Maîtrise des pipelines d'ingestion et du stockage sur Amazon S3.

• Expertise des architectures Medallion (Bronze / Silver / Gold).

• Bonne connaissance des concepts Lambda Architecture, partitioning, bucketing et design by query.

• Expérience de l'industrialisation (CI/CD, monitoring, tests automatisés).

• Respect des bonnes pratiques de développement (clean code, tests, qualité logicielle).

Soft skills

• Forte autonomie et esprit d'initiative.

• Approche proactive et orientée solutions.

• Capacité à gérer plusieurs sujets en parallèle.

• Aptitude à partager ses connaissances et accompagner les autres développeurs.

• Excellentes capacités de communication et ouverture aux feedbacks.

• Maîtrise professionnelle du français et de l'anglais.