Data Engineer

Dans le cadre du déploiement d'une plateforme Data destinée à centraliser, fiabiliser et gouverner les données des domaines banque et assurance, vous intégrerez une squad Data Flux composée de développeurs Data, d'un architecte technique, d'un Business Analyst et d'un Product Owner, sur les missions suivantes :

• Concevoir et développer des pipelines de données robustes et évolutifs, selon une architecture en couches Bronze / Silver / Gold

• Implémenter et paramétrer des workflows Apache NiFi pour l'ingestion, la collecte et la normalisation des données issues de sources multiples (fichiers XML/CSV, API REST)

• Participer à la modélisation du socle de données structurées et au développement des transformations permettant de constituer les vues consolidées du MDM

• Mettre en place des mécanismes d'audit, de logs et de contrôle qualité : complétude, unicité, cohérence et versioning des données

• Surveiller les performances des pipelines, identifier les goulots d'étranglement et proposer des améliorations continues

• Veiller à la sécurité des données : authentification, chiffrement, gestion des accès, conformité aux standards du groupe

• Documenter les processus, schémas de données et bonnes pratiques afin d'assurer la maintenabilité et le partage des connaissances au sein de la squad

Indispensables :

• Apache NiFi : ingestion, orchestration, monitoring de flux de données

• SQL / NoSQL : modélisation relationnelle avancée, PostgreSQL

• Stockage objet : S3, Azure Blob Storage

• Formats et protocoles d'échange : JSON, XML, CSV, REST API

• CI/CD : GitLab, GitLab CI

• Expérience confirmée (5–10 ans) en ingénierie de données dans un environnement BI, Datalake ou flux de données

• Capacité à évoluer dans un contexte complexe, multi-sources, à forte exigence métier

• Autonomie, rigueur et esprit d'équipe

Appréciées :

• Expérience dans les secteurs assurance, banque ou finance, notamment sur des flux conformes à la norme Penelop

• Connaissance des données assurantielles ou des données clients dans un contexte réglementé

• Compétences en scripting Python et/ou Bash pour l'automatisation des traitements