Tech Lead Data Engineering – Domaine R&D

Dans le cadre de projets stratégiques au sein d’un domaine R&D, nous recherchons un(e) Tech Lead Data Engineering pour accompagner la conception, l’industrialisation et l’évolution de solutions Data & Cloud.

La mission combine une forte expertise en Data Engineering, une maîtrise de l’écosystème Google Cloud Platform (GCP) et une capacité à apporter du leadership technique sur les choix d’architecture, les bonnes pratiques et l’industrialisation des solutions.

Le/la Tech Lead interviendra notamment sur :

• La conception et l’évolution de solutions Data sur GCP, notamment autour de Cloud Run / GKE, IAM, BigQuery et Google Cloud Storage (GCS).

• La définition et la mise en œuvre des bonnes pratiques d’architecture et d’industrialisation Data.

• L’automatisation et la gestion des infrastructures avec Terraform.

• La conception et l’optimisation de traitements en Python et SQL.

• La mise en place de pipelines d’ingestion de données publiques et internes, en Python et via des outils tels que Fivetran, Rclone ou équivalents.

• L’orchestration et l’automatisation des workflows avec Cloud Workflows, Airflow ou des technologies similaires.

• Le développement d’applications et d’interfaces Data avec Streamlit.

• La définition, la mise en œuvre et l’amélioration des pratiques CI/CD, notamment avec GitLab CI ou équivalent.

• L’accompagnement technique des équipes, la revue des choix d’implémentation et la garantie de la qualité, de la robustesse et de la maintenabilité des solutions développées.

La mission pourra également couvrir des sujets innovants liés à la Data et à l’IA générative, notamment la transformation de données avec dbt, l’utilisation de frameworks LLM tels que LiteLLM et Langfuse, la conception de pipelines RAG, l’utilisation de bases de données vectorielles comme Weaviate, ainsi que le monitoring et l’alerting avec Grafana.

Profil recherché

Nous recherchons un profil expérimenté disposant d’une solide expertise en Data Engineering et Cloud GCP, capable de prendre du recul sur les problématiques techniques et de jouer un véritable rôle de référent au sein d’un environnement R&D.

Compétences indispensables :

• Expertise de Google Cloud Platform : Cloud Run et/ou GKE, IAM, BigQuery, GCS.

• Solide maîtrise de Terraform et des pratiques Infrastructure as Code.

• Très bonne maîtrise de Python et SQL.

• Expérience significative dans la conception et l’industrialisation de pipelines d’ingestion de données.

• Maîtrise d’outils tels que Fivetran, Rclone ou équivalents.

• Expérience en orchestration de workflows avec Cloud Workflows et/ou Airflow.

• Expérience avec Streamlit ou un framework de visualisation similaire.

• Bonne maîtrise des pratiques CI/CD, idéalement avec GitLab CI.

• Capacité à porter des choix d’architecture et des standards techniques dans un environnement Data.

Compétences appréciées :

• Transformation et modélisation de données avec dbt.

• Connaissance des frameworks et outils LLM, notamment LiteLLM et Langfuse.

• Expérience dans la conception de pipelines RAG.

• Connaissance des bases de données vectorielles, notamment Weaviate.

• Monitoring et alerting avec Grafana.

Au-delà de l’expertise technique, nous recherchons une personne faisant preuve de leadership technique, autonomie, pragmatisme et capacité à fédérer autour de bonnes pratiques.

Le profil devra être capable de comprendre rapidement des problématiques complexes, challenger les solutions existantes, proposer des orientations techniques pertinentes et accompagner les équipes dans leur mise en œuvre.

Cette mission représente une belle opportunité pour un(e) Tech Lead souhaitant évoluer sur des problématiques Data Engineering à forte valeur ajoutée, dans un environnement R&D, avec une stack Cloud moderne et une ouverture sur des sujets innovants autour de l’IA générative et du RAG.