DevOps CARD

Mission principale

- Administrateur technique responsable du maintien des outils de cartographie, de l'alimentation et de l'enrichissement des cartographies fonctionnelles et techniques, à travers l'interconnexion entre le dictionnaire de données (OpenMetadata), le catalogue de données métier (Istya) et les produits de la Plateforme Sécurisée des Données (Datalake, requêteur sécurisé Odylac, écosystème Dataviz).

- Garantir que les outils sont correctement paramétrés, sécurisés et exploitables (donc documentés), avec pour cible leur transfert dans un centre d'exploitation dédié.

Exploitation (OPS)

• Maintenir et déployer les configurations d'infrastructure et d'outils via Terraform et Ansible

• Assurer le MCO des instances NiFi et des connecteurs OpenMetadata

• Monitorer les pipelines d'ingestion et résoudre les incidents techniques

• Documenter les actions d'exploitation dans des fiches d'exploitation

Alimentation du catalogue

• Développer et maintenir les flux Apache NiFi d'ingestion de métadonnées techniques et fonctionnelles (OMD et Istya)

• Garantir le contrôle qualité, la transformation et la cohérence des données entrantes

Connectivité produits data et catalogue

• Améliorer et étendre la connectivité entre le Datalake et OpenMetadata (extraction de schéma, profilage)

• Étendre la cartographie automatique aux autres services Data de la Plateforme Sécurisée des Données

Environnement technique

Terraform, Ansible, OpenMetadata, API REST, Istya (catalogue maison), Datalake (Hadoop, Spark, Hive), MinIO, Trino

Compétences techniques

• IaC Terraform et gestion de configuration Ansible (expertise)

• Apache NiFi : conception de flows, processeurs, gestion des erreurs

• Python et scripts (Bash, SQL) pour parser et transformer des métadonnées

• Data lineage, catalogue et dictionnaire de données (OpenMetadata ou équivalent)

• Architectures Data : Hadoop, Spark, Hive, S3/MinIO, Trino

Fonctionnelles : sensibilité gouvernance et sécurité des données, capacité à vulgariser

Soft skills : documenter et transmettre, esprit collaboratif

Compétences techniques

• IaC Terraform et gestion de configuration Ansible (expertise)

• Apache NiFi : conception de flows, processeurs, gestion des erreurs

• Python et scripts (Bash, SQL) pour parser et transformer des métadonnées

• Data lineage, catalogue et dictionnaire de données (OpenMetadata ou équivalent)

• Architectures Data : Hadoop, Spark, Hive, S3/MinIO, Trino

Fonctionnelles : sensibilité gouvernance et sécurité des données, capacité à vulgariser

Soft skills : documenter et transmettre, esprit collaboratif