Data Engineer (Spark,Java,AWS)

Mission Générale

En tant que Data Engineer Confirmé, vous rejoignez une équipe d'expertise Data pour intervenir sur des projets stratégiques de développement de cas d'usage. Vous évoluerez dans un environnement technique hybride (Cloud AWS / On-Premise) avec une trajectoire cible orientée On-Premise.

Vous serez un acteur clé des phases de Build et de Run, garantissant la robustesse et l'évolutivité des architectures de données à grande échelle.

Responsabilités & Missions

• Conception & Design : Participer activement à l'élaboration du design technique des produits logiciels.

• Développement : Prendre en charge les User Stories (US) de développement au sein de l'équipe agile (Java/Spark).

• Expertise Technique : Faciliter la recherche de solutions techniques innovantes pour répondre aux problématiques data complexes.

• Intégration SI : Collaborer étroitement avec le Tech Lead Data pour assurer l'intégration fluide des produits dans le Système d'Information.

• Qualité & Maintenance : Garantir la qualité du code (tests, revues de code) et assurer la rédaction de la documentation technique.

Profil Recherché

Vous justifiez d'une expérience minimale de 5 ans en Data Engineering. Vous êtes reconnu pour votre rigueur technique et votre capacité à évoluer dans des écosystèmes hybrides.

Compétences Techniques Impératives

• Frameworks Big Data : Maîtrise confirmée de Spark avec le langage Java (impératif).

• Langages : Expertise en SQL (requêtes complexes, optimisation).

• Cloud AWS : Pratique des services S3, Glue, Redshift, Step Functions, Lambda.

• DevOps / CI-CD : Maîtrise de Git et Jenkins.

Compétences Souhaitables

• Langage : Python (niveau confirmé).

• Infrastructure & Conteneurisation : Docker, Terraform.

• ETL : Semarchy XDI (ex-Stambia).

• Data Viz : Power BI ou Business Objects (BO).

Livrables Attendus

1. Livrables Logiciels : Développements Java Spark optimisés et maintenables.

2. Documentation : Dossiers de conception technique et manuels d'exploitation.

Soft Skills & Langues

• Français : Courant (impératif).

• Agilité : Expérience éprouvée en environnement Agile (Scrum/Kanban).

• Autonomie : Capacité à prendre en charge des sujets de bout en bout.