
Ronan Maron
Data Engineer - Java / Spark
Salaire / Taux journalier
Cannes, France
Freelance, ouvert au CDI
Peut venir sur site
Expertises
Langues
À propos
Introduction
Ingénieur de données avec expertise en Big Data et infrastructure de traitement à grande échelle. A optimisé le traitement de données des compteurs Linky chez Enedis (réduction de 40% du temps d'exécution), structuré un data lake pour Air France-KLM (croissance de 5 à 50+ datasets), et développé des solutions fast data chez Amadeus. Spécialiste Spark/Java/Kafka offrant performance et fiabilité pour vos projets data.
Expérience de travail
Data Engineer
Enedis
mai 2022 - mars 2023
11 mois
Lyon, France
# Contexte Intégration au sein d'une équipe de 10 développeurs pour moderniser l'infrastructure de traitement des données des 30 millions de compteurs Linky, avec pour objectif d'améliorer les performances et la fiabilité des traitements à grande échelle. # Missions et réalisations ## Optimisation des traitements Big Data - Développement et refactoring de jobs Spark - Réduction de 40% du temps d'exécution des traitements grâce à l'optimisation des partitions et de la gestion mémoire - Migration de jobs legacy vers Spark 3 ## Industrialisation et qualité - Implémentation d'une stratégie de tests automatisés (unitaires, d'intégration) - Mise en place de pipelines CI/CD (Jenkins) avec validation pré-déploiement ## Monitoring et fiabilité - Conception d'un système de suivi des métriques de traitement - Détection des jobs "vides" (succès sans données traitées) # Environnement technique Spark 3, Java 11, Spring, Scala, Ceph/S3, Git
Développeur Fast Data
Amadeus
juin 2021 - mars 2022
10 mois
Nice et périphérie · Hybrid
# Contexte Membre d'une équipe de 3 développeurs en charge d'une plateforme fast data critique traitant des flux temps-réel pour les opérations aéronautiques de compagnies majeures, avec des exigences strictes de disponibilité. # Missions et réalisations - Développement de nouvelles fonctionnalités pour les microservices en Java/Scala - Mise en place d'une stratégie de test (unitaires, intégration, E2E) - Développement de scénarios Robot Framework pour les tests - Élimination des régressions en production # Environnement technique Java 11, Scala, Kafka, MongoDB, OpenShift/Helm, Docker Desktop, CI/CD, SAFe Agile, Robot Framework, JUnit, Postman, SonarQube
Développeur Big Data
Air France-KLM
mars 2019 - mai 2021
2 ans 3 mois
06560 Valbonne, France
# Contexte Premier développeur en mission sur le tout nouveau projet de data lake, avec pour objectif de structurer les données pour les rendre exploitables par les équipes opérationnelles et analytiques. En quasi-autonomie technique pendant la majeure partie de la mission, avec une étroite collaboration avec les équipes KLM consommatrices des données. # Missions - Conception et développement des pipelines de traitement des données brutes - Transformation des données XML/JSON en datasets Parquet structurés - Maintenance opérationnelle et monitoring des jobs en production # Résultats - Croissance du data lake : passage de 5 à 50+ datasets structurés en 2 ans ; intégration de 15+ sources de données hétérogènes. - Amélioration de l'exploitabilité : documentation complète permettant l'adoption par de nouveaux utilisateurs ; réduction du temps d'accès aux données pour les analystes. - Efficacité opérationnelle : stabilité des jobs en production, automatisation des processus réduisant les interventions manuelles ; préparation du terrain pour l'industrialisation avec l'arrivée d'un second développeur. # Environnement technique Spark 2 (Core, SQL, Dataset), Hadoop (HDP 2.6, HDFS, YARN), Kafka, Java 8, Python, PySpark, Bash, Control-M, MongoDB, Spring Boot, Cloud Foundry
Intégrateur logiciel - Développeur
ACOSS
juin 2016 - oct. 2018
2 ans 5 mois
Région de Nice, France
Migration d'un logiciel basé sur une base de données SQL Server vers Redmine. - Développement d’un client API REST pour Redmine et modification de l'affichage HTML. Intégration technique en centre de service composé d’une dizaine de personnes. - Réception, packaging, et déploiement des développements (web services SOAP). - Installation en environnements d’intégration et en production. - Rédaction de documentation technique. Environnement technique : Linux Red Hat, scripts shell, Webmin, Redmine, SQL, API REST, XML, HTML, SQL Server
Institut National de Recherche Agronomique (INRA)
mai 2012 - mars 2014
1 an 11 mois
Avignon · On-site
Ingénieur d'étude, unité Agroclim
avr. 2013 - mars 2014
1 an
Avignon · On-site
Intégration d’un modèle d’architecture racinaire avec le modèle de culture STICS (Agroclim). - Analyse des entrées/sorties de STICS et programmation de fonctions d’accès aux données. - Manipulation des données de simulations dans une base MySQL. - Développement d’une interface graphique avec Tcl/Tk. - Rédaction de la documentation technique et du guide d’utilisation. Environnement technique : Eclipse, Java SE, MySQL, R, RJDBC, tcltk
Ingénieur d'étude, unité Plantes et Systèmes de culture Horticoles
mai 2012 - mai 2013
1 an 1 mois
Avignon · On-site
Développement d’un modèle informatique simulant la croissance racinaire et l’absorption d’éléments dans le sol. - Recherche bibliographique et création d’un fork d’un modèle de simulation de plantes. - Implémentation en Java à partir d’un prototype en C++ et ajout de méthodes d’absorption. - Analyse des effets des paramètres racinaires. Environnement technique : Eclipse, Java SE, Java 3D, R, odfWeave
Stagiaire biologiste
Institut National de Police Scientifique
janv. 2011 - juil. 2011
7 mois
69130 Écully, France
Stage : Définitions de plans d'expérience pour l'évaluation d'analyse génétique des nouveaux marqueurs européens dans le cadre des traces biologiques en criminalistique. • Recherche bibliographique. - Planification expérimentale - Recueil des données avec GeneMapper - Analyses statistiques multivariées avec ade4 - Rédaction d'un rapport sous forme d'article scientifique Environnement technique : R, RStudio, ade4, LaTeX, GeneMapper
Stagiaire statistique
Institut National de Police Scientifique
mars 2010 - juil. 2010
5 mois
69130 Écully, France
Stage : Implémentation sous R de statistiques utilisées pour la validation de méthodes quantitatives. Application à des données en sciences forensiques. Création et mise en place d'une application Web permettant de générer automatiquement des rapports de validation de méthodes de dosage.
Formation
Université Claude Bernard Lyon 1
Master Biostatistiques et Bioinformatique
2009 - 2011
2 ans 1 mois