Data Engineer

Contextede la mission — Synthèse

ATTENTION NE SERONT PRIS EN COMPTE UNIQUEMENT LES PROFILS LILLOIS

Au sein d’une équipe Data Expérience, une cellule de Data Engineers collabore avec les équipes d’un produit financier SaaS dédié à l’analyse de performance et au pilotage économique.

L’équipe projet comprend plusieurs relais fonctionnels (dont un Product Owner), un interlocuteur technico-fonctionnel et un Data Engineer à temps partiel.

Un programme de migration est en cours afin de rationaliser l’écosystème Data : l’ensemble des scripts sera transféré vers une plateforme unifiée et optimisée pour réduire la complexité technique et les coûts opérationnels.

Objectifs et livrables attendus

• Expertise technique : maîtrise avancée d’Apache Spark (Python/Scala) et optimisation de clusters cloud

• Migration des flux : transfert des traitements existants avec interruption minimale de service

• Gouvernance : pilotage rigoureux (suivi d’avancement, gestion des risques, reporting)

• Support & formation : accompagnement des équipes internes durant la transition (documentation, tutoriels, assistance technique)

Compétences clés requises

• Databricks

• 
  

• Apache Spark

• AWS

• SQL