Contexte

Dans le cadre du renforcement de ses équipes IT, notre client dans le secteur public belge recherche un Consultant Kafka Expert afin d’accompagner l’évolution, l’optimisation et la gouvernance de sa plateforme Kafka.

Missions principales

• Conception et architecture : Participer à l’architecture des flux de données et intégrer Kafka comme onne vertébrale des microservices et du cdc

• Développement : Créer et optimiser des pipelines de données, configurer les topics, partitions et les mécanismes de rétention. Opérationnaliser ces procédures

• Intégration : Évaluer l’architecture des connecteurs Kafka Connect existants et améliorer le monitoring

• Supervision : Mettre en place les outils de monitoring (ex : Grafana)

• Mise en place des procédures de troubleshooting afin de garantir la haute disponibilité des clusters

• Sécurité : Sécuriser les échanges de données (TLS, SASL, ACL)

• Transmission des connaissances et ation de l’équipe technique

Compétences techniques requises

• Vous disposez d'une expertise sur Apache Kafka, notamment sur les brokers, KRaft et Schema Registry.

• Vous avez une expérience confirmée avec Kafka Streams.

• Vous maîtrisez Kafka Connect à un niveau confirmé.

• Vous avez une expérience confirmée en architecture distribuée et en microservices.

• Vous avez travaillé sur des architectures orientées événements (Event-Driven Architecture) et des plateformes de streaming d'événements.

• Vous maîtrisez la conteneurisation de plateformes Kafka avec Strimzi, Confluent ou des technologies similaires.

• Vous avez une expérience confirmée des outils de monitoring, notamment Grafana.

• Vous possédez des connaissances d'Ansible.

• Vous maîtrisez la sécurisation de Kafka, notamment avec TLS, SASL et les ACL.

• Vous avez une expertise dans le déploiement, la mise en production et l'optimisation de plateformes Kafka.

• Une expérience avec une Data Streaming Stack (par exemple Apache Iceberg, Apache Spark ou Apache Flink) constitue un atout.

Langues

• Français : Courant

• Anglais : Courant

• Néerlandais : connaissance passive