Expert technique OpenSearch/Kafka

Contexte

Dans le cadre d’un projet de modernisation d’une plateforme de recherche et de gestion des logs, nous recherchons un Expert OpenSearch / Kafka pour accompagner une migration d’une solution ELK vers OpenSearch.

Le projet comprend notamment l’évolution de l’architecture, l’adaptation de la chaîne d’ingestion et l’industrialisation des déploiements.

Le consultant interviendra sur les sujets d’architecture, performance, migration et industrialisation, avec un rôle particulièrement important autour de Kafka.

Missions

Auditer l’architecture existante et identifier les axes d’amélioration

Apporter son expertise sur l’architecture et l’optimisation d’OpenSearch

Optimiser les performances, la résilience et la maintenabilité de la plateforme

Administrer et optimiser les clusters Kafka

Analyser et optimiser les flux d’ingestion

Accompagner les évolutions d’architecture Kafka

Concevoir et optimiser les pipelines Logstash

Contribuer à la migration ELK vers OpenSearch

Participer à la migration des index, mappings, templates et pipelines

Industrialiser les déploiements avec Ansible / AWX

Documenter les solutions mises en œuvre

Accompagner et faire monter en compétence les équipes techniques

Formuler des recommandations techniques claires et pragmatiques

Environnement technique

OpenSearch

Kafka

Logstash

Ansible / AWX

ELK / Elasticsearch

Pipelines d’ingestion et traitement de logs

Profil recherché

Expertise confirmée sur OpenSearch, notamment en architecture, gestion de clusters et optimisation des performances

Très bonne maîtrise de Kafka : administration, exploitation, performance et architecture

Bonne expertise Logstash et conception de pipelines

Expérience concrète d’une migration ELK vers OpenSearch

Maîtrise d’Ansible / AWX

Expérience dans des environnements techniques complexes

Autonomie et capacité à être rapidement opérationnel

Bon relationnel et capacité à accompagner des équipes techniques

Capacité à prendre du recul et à formuler des recommandations d’architecture

1) Expérience concrète d’une migration ELK vers OpenSearch

2) Expertise confirmée sur OpenSearch, notamment en architecture, gestion de clusters et optimisation des performances

3) Très bonne maîtrise de Kafka : administration, exploitation, performance et architecture