Valentin Dormeuil

Introduction

Après plusieurs années dans la grande distribution, j'ai choisi d'orienter ma carrière vers le Data Engineering afin de concevoir des plateformes de données performantes et de mettre à profit ma compréhension des enjeux métier. Dans le cadre de ma reconversion, j'ai développé Crypto Alerts, une plateforme de données reproduisant une architecture de production couvrant l'ensemble du cycle de vie de la donnée : ingestion batch et temps réel, transformation, modélisation analytique, API REST, visualisation et observabilité. La plateforme a été conçue pour traiter plusieurs millions d'utilisateurs, de positions et de notifications, avec une architecture optimisée autour de PostgreSQL, Airflow et dbt. Ce projet m'a permis de concevoir une solution complète intégrant : • Des pipelines d'ingestion batch (CCXT) et temps réel (WebSockets). • L'orchestration et l'automatisation des workflows avec Apache Airflow. • Le développement de traitements Python pour la collecte, la transformation et l'analyse des données. • Le stockage et l'optimisation des données dans PostgreSQL. • La modélisation analytique avec dbt (staging et marts). • Le développement d'une API REST avec FastAPI. • La création de tableaux de bord avec Streamlit et Tableau. • La mise en place du monitoring avec Prometheus et Grafana. • La conteneurisation de la plateforme avec Docker Compose. • L'automatisation des tests avec Pytest et GitHub Actions. Quelques chiffres • 2 000 000 d'utilisateurs générés en environ 13 minutes grâce à un traitement batch optimisé. • Plusieurs millions de notifications et d'alertes de prix traitées. • 3 data marts construits avec dbt pour l'analyse des utilisateurs, des notifications et des cryptomonnaies. • 3 tableaux de bord Tableau et 1 dashboard Streamlit développés pour l'analyse métier et le suivi opérationnel. Aujourd'hui, je recherche une opportunité en Data Engineering où je pourrai contribuer à la conception de pipelines de données, d'architectures analytiques et de solutions à forte valeur métier, tout en continuant à développer mes compétences techniques. Compétences : Python • SQL • PostgreSQL • Apache Airflow • dbt • FastAPI • Docker • Streamlit • Tableau • Prometheus • Grafana • Git • GitHub Actions • ETL / ELT • Data Pipelines • Analytics Engineering

Liens