Ingénieur Data Ops

Au sein d’une équipe spécialisée dans les usages décisionnels de la Data, l’Ingénieur DataOps assure l’exploitation quotidienne et le maintien en conditions opérationnelles des environnements hors production (développement, recette et préproduction).

Il veille à la disponibilité, à la cohérence et à la fiabilité des plateformes Data, en garantissant la qualité des environnements et la stabilité des traitements.

À ce titre, ses principales missions sont les suivantes :

• Gestion des environnements Data : réaliser les rafraîchissements de données sur les différents environnements et assurer leur cohérence.

• Déploiement et installation applicative : installer et mettre à jour les traitements Spark/Scala, les ETL, les scripts SQL/PL-SQL Oracle et les scripts Shell.

• Synchronisation des environnements : garantir l’alignement des versions applicatives, des composants logiciels, des configurations et des paramétrages.

• Monitoring et observabilité : concevoir, développer et maintenir des tableaux de bord de supervision permettant de suivre les exécutions, les volumes de données et les indicateurs de fonctionnement.

• Automatisation des opérations : développer des scripts et des outils afin de limiter les interventions manuelles, notamment pour le contrôle des écarts entre environnements, la validation des installations et des rafraîchissements, ainsi que la vérification de la cohérence des bases de données.

• Maintien en conditions opérationnelles : exécuter et superviser les traitements Spark, analyser les logs, contrôler les dépendances, suivre les traitements batch via l’ordonnanceur et assurer les relances nécessaires.

• Gestion des alertes et reporting : mettre en place et suivre les alertes, produire des rapports d’exploitation et communiquer sur l’état des environnements.

• Amélioration continue : contribuer à la fiabilisation des déploiements, à l’optimisation des procédures d’exploitation et à la qualité des livraisons Data.

• Collaboration transverse : accompagner les équipes de développement et de production en apportant un support opérationnel, des analyses techniques et des outils adaptés à leurs besoins.

Compétences techniques

Le candidat dispose d’une expérience en exploitation de plateformes Data, en automatisation des opérations et en administration d’environnements techniques.

Les compétences attendues sont les suivantes :

• Google Cloud Platform (GCP) : niveau avancé.

• Elasticsearch, Logstash, Kibana (ELK) : niveau avancé.

• Oracle PL/SQL : niveau expert.

• OpCon (ordonnancement des traitements) : niveau expert.

• Apache Hadoop : niveau confirmé.

• Scala : niveau confirmé.

• Shell Linux : niveau confirmé.

• Apache Spark : niveau confirmé.

• Git : niveau confirmé.

• MongoDB : niveau confirmé.

Qualités professionnelles

Le poste nécessite les qualités suivantes :

• Rigueur et organisation : appliquer les procédures d’exploitation, documenter les interventions et respecter les standards de déploiement.

• Esprit d’analyse et d’investigation : diagnostiquer les incidents, analyser les erreurs et les métriques techniques, et identifier les causes des dysfonctionnements.

• Vision globale de la chaîne Data : comprendre les dépendances entre les composants et assurer la surveillance des pipelines de bout en bout.

• Sens du service et esprit d’équipe : collaborer efficacement avec les équipes de développement, de production et les utilisateurs des solutions Data.

• Autonomie : prendre en charge les opérations courantes, identifier les actions correctives et contribuer à la résolution des incidents.

• Communication : partager les informations techniques, assurer un reporting clair et faciliter la coordination entre les différentes équipes.