Expert ClickHouse

Je recherche un Expert ClickHouse pour auditer et renforcer la robustesse d’un cluster de données en production au sein d’une fintech spécialisée dans l’analyse de transactions bancaires.

Contexte:

Vous interviendrez dans un environnement technique déjà structuré, opéré par une petite équipe (2 SRE + 1 Data Engineer), avec des enjeux autour de la fiabilité, de la performance et de la gestion de volumes importants de données (~2,5 TB).

L’architecture actuelle repose sur un cluster ClickHouse distribué (multi-shards, multi-replicas), avec ingestion via Kafka et des mécanismes de backup déjà en place.

Objectifs de la mission:

• Réaliser un audit de l’architecture existante (rapport d’étonnement)

• Identifier les points de fragilité et proposer des améliorations concrètes

• Revoir la stratégie de backup / restore : définition des RPO / RTO, stratégie de snapshots, fiabilité des restaurations

• Analyser et optimiser les mécanismes d’ingestion via Kafka

• Accompagner l’équipe sur certains concepts avancés ClickHouse :

  • mutations (fonctionnement, coûts, bonnes pratiques)

  • tables système (diagnostic et monitoring)

  • interactions avec ClickHouse Keeper

Livrables attendus

• Compte-rendu structuré (forces, risques, recommandations priorisées)

• Plan d’actions : quick wins, améliorations moyen terme, chantiers long terme

• Recommandations concrètes sur backup / restauration

Profil recherché

• Expertise avancée sur ClickHouse en production

• Expérience significative en architectures distribuées, data pipelines (Kafka), problématiques de scalabilité et de résilience

• Capacité à challenger un existant, proposer des solutions pragmatiques, vulgariser auprès d’une équipe technique