MISSION EN NEARSHORE

Dans le cadre du développement d’une Data Platform moderne orientée traitement de données temps réel et analytique, nous recherchons un(e) Data Engineer / Backend Engineer capable d’intervenir sur des architectures distribuées à forte volumétrie.

La mission s’adresse à des profils ayant une forte culture backend engineering et event-driven, avec une expérience significative autour de Kafka, Spark, GCP et des architectures microservices.

Vos missions

Développement & Architecture Data

• Concevoir et développer des pipelines Data temps réel et batch

• Développer des traitements distribués avec Apache Spark

• Participer à la mise en place d’architectures event-driven autour de Kafka et Pub/Sub

• Développer des microservices robustes en Java et/ou Scala

• Participer à la conception de plateformes Data hautement disponibles et scalables

• Optimiser les traitements BigQuery et les flux de données à forte volumétrie

Streaming & Data Processing

• Développer et maintenir des producers/consumers Kafka

• Participer à la gestion des flux temps réel

• Implémenter des traitements de transformation, enrichissement et filtrage des événements

• Participer à l’industrialisation des pipelines Data

• Contribuer à la qualité et à la fiabilité des échanges de données

Cloud & Industrialisation

• Déployer et maintenir les composants sur GCP

• Participer à l’automatisation CI/CD

• Contribuer à l’observabilité et au monitoring des plateformes

• Participer à l’amélioration continue des pratiques DevOps/DataOps

Collaboration Agile

• Participer aux cérémonies Agile/Scrum

• Réaliser les tests techniques et les revues de code

• Collaborer avec les équipes produit, développement et production

• Contribuer aux choix techniques et à l’évolution des architectures

Environnement technique

GCP, BigQuery, Apache Kafka, Apache Spark, Pub/Sub, Java, Scala, SQL, Kubernetes, Docker, GitLab CI/CD, Linux, Agile Scrum.