Ingénieur DataOps / DevOps Data

Au sein de la division Data d'un grand groupe d'assurance, l'équipe BI Décisionnel gère une plateforme de pipelines de données (Hadoop HDFS/Hive, Oracle Exadata, MongoDB, Kafka et Qlik). En pleine préparation de sa migration vers GCP, l'équipe cherche à fiabiliser et automatiser l'exploitation de ses 4 environnements hors-production (DEV, RCT, PREPROD), aujourd'hui gérés manuellement.

Rattaché à l'équipe « Performance », l'Ingénieur DataOps assure le maintien en conditions opérationnelles (MCO), le support aux développeurs et l'automatisation des processus pour garantir la qualité et la stabilité des livraisons.

Tâches et responsabilités (75 % Ops / 25 % Support Dev)

• Gestion et MCO des environnements hors-prod : suivi des batchs et relances, analyse des logs, synchronisation des environnements et accompagnement de la migration hors-prod vers GCP.

• Automatisation & Qualité : automatisation des procédures de refresh de données, gestion des pipelines de livraison CI/CD avec GitLab et contrôle de la cohérence des BDD.

• Observabilité : création et maintien de tableaux de bord de suivi (exécutions, volumes) et force de proposition sur les outils de monitoring.

• Coordination : interface technique centrale entre les équipes de développement Data, la Production, les Chefs de Projets et les utilisateurs internes.

• Environnements & CI/CD : maîtrise des architectures On-Premise (obligatoire) et appétence/connaissance de GCP, GitLab CI/CD, scripting Python et Shell Linux.

• Écosystème Data & ETL : traitements Spark, Hadoop (HDFS/Hive), Oracle (PL/SQL) et MongoDB. Idéalement maîtrise d'Informatica (ou un autre ETL du marché).

• Ordonnancement & Monitoring : compréhension du fonctionnement d'un ordonnanceur (OpCon fortement apprécié, ou Control-M, Airflow, Oozie) pour le suivi et les relances ; compétences en analyse de logs et monitoring.

Savoir-être :

• Excellent relationnel et esprit d'équipe (travail très transversal).

• Rigoureux, autonome et doté d'un fort esprit d'investigation.

• Force de proposition sur l'automatisation et l'outillage de monitoring.