
Hubert P.
Senior Data Architect | Big Data & Spark
Salaire / Taux journalier
Lyon, France
Freelance
Peut venir sur site
Expertises
Langues
À propos
Introduction
Architecte data et ingénieur Big Data freelance avec +10 ans d'expérience sur des projets stratégiques (EDF, Enedis, Agirc-Arrco). Expert en écosystème Hadoop/Spark, migration data et optimisation de pipelines, avec un leadership technique éprouvé en environnement Scrum. Spécialisé en architecture de datalake et automatisation de traitements Big Data pour maximiser performance et fiabilité de vos données métier.
Expérience de travail
Dirigeant
Big data hub consultingFreelance
févr. 2025 - Présent
1 an 9 mois
Lyon, France
IA curieux, j'aime concevoir et tester les possibilités de l'IA, objectifs 2026 : créer une offre SAAS boosté par IA et vendre des outils qui règlent un/des problèmes que je rencontre dans mon parcours professionnel.
Data Architect
Agirc-ArrcoFreelance
févr. 2024 - Présent
2 ans 9 mois
Lyon, France
L'objectif est d'intégrer toutes les données en plus de celle SI de gestion dans notre datalake afin de proposer d'autres informations aux utilisateurs de la plateforme. En tant que data architect/ tech lead, je suis en charge : - d'avoir une vision sur l'évolution de la plateforme et la mise en place d'outil pour améliorer les performances - de la gestion de l'équipe de développement et de leur montée en compétences sur l'application Agirc-Arrco - du développement de pipeline générique en python/Spark pour l'intégration de l'ensemble des données de l'agirc-arrco dans l'environnement HADOOP (Cloudera). - du monitoring de la prod via des dashboard Grafana et vérification de la conformité des données (KPI, alertes , gestion de bugs, montée de version applicatives, ...) - de la conception des évolutions pour maintenir la plateforme à jour (évolution spark2 -> spark3 -> iceberg) - de la participation à la conception de la nouvelle data plateforme
Développeur spark java Big Data
Enedis
nov. 2022 - mars 2024
1 an 5 mois
Lyon, France
Je travaille dans l'entitée linkypilot et ma mission consiste à migrer le code spark cascading en spark standalone.La migration est une migration d'hadoop vers de l'OpenStack.Les différentes tâches qui me sont confiées sont : - Comprendre l'existant - Créer le flux côté spark - Assurer de l'intégrité des données - Assurer la performance du batch - Challenger le métier sur de potentiel évolution - Rédiger de la documentation : technique, étude d'impact, résultat de Poc
Animateur intervenant
Groupe GEMAFreelance
févr. 2023 - août 2023
7 mois
Lyon, France
Cours sur le Big data en entreprise
Développeur Big Data
ADRENALEAD
avr. 2021 - déc. 2022
1 an 9 mois
Lyon, France
Développement de différentes APIs pour gérer la partie CRM et facturation de l'entreprise. Développement de batchs pour de la mise à disposition de statistiques dans un outil tiers. Développement de dashboard avec KPI Support sur le Search 'EKS' Correction occasionnelle de développements spécifiques PHP / javascript
Technical leader Big Data
EDF
nov. 2020 - mai 2021
7 mois
69760 Limonest, France
Au sein de l'équipe Espadon, j'ai travaillé sur la plateforme big data sur l'intégration de données des centrale nucléaire. Mes objectifs étaient : - La migration applicative et data ElasticSearch . - La migration tomcat et apache http. - développement et automatisation de pipeline spark pour l'alimentation de données pour de la BI
Consultant Adneom / Développeur Scala / Technical Leader Big Data
ADNEOM
nov. 2018 - mai 2021
2 ans 7 mois
Région de Lyon, France
Lead Technical Consultant JAVA
SNCF
déc. 2019 - juil. 2020
8 mois
Région de Lyon, France
Développement d'API métier consommant des services REST et créant des fichiers plats exploitable par les outils SNCF notamment la gestion des habilitations utilisateurs au seins de l'Active Directory ainsi que la surveillance des parcours des trains SNCF par voyage découpé par tronçons (station)
chef de projet digital
Table Ronde Française
avr. 2020 - juil. 2020
4 mois
Lyon, France
Gestion de projet sur la mise en place du nouveau site institutionnel de la Table Ronde Française.
EDF
avr. 2019 - déc. 2019
9 mois
Région de Lyon, France
Lead Technical Consultant Big Data
sept. 2019 - déc. 2019
4 mois
Région de Lyon, France
Optimisation de l'application ESPADON de l'enteprise EDF permettant la mise à disposition des données dans le Datalake ainsi que la mise à disposition de vue dans le Datamart. Mon travail consiste à mettre en place la haute disponibilité du Datalake et la diminution du temps de traitement via le tunning des job spark.
Lead Technical Consultant Java/Angular
avr. 2019 - oct. 2019
7 mois
Région de Lyon, France
Développement d'une application Client Riche et Mobile pour la surveillance des prestations en centrale nucléaire.
Tech Lead Projet applicatif
Apave
janv. 2019 - mars 2019
3 mois
Région de Lyon, France
Mise en place d'une librairie pour le Gestion Documentaire interne sur l'outil IBM Filenet.
Technical Leader Hadoop - Consultant Big Data
EDF
juil. 2017 - oct. 2018
1 an 4 mois
92700 Colombes, France
Développement d'une console d'hypervision en temps réel permettant la gestion des centres de relation client national - Développement de 4 applications Spark Streaming en Java consommant des spécifiques logs depuis kafka. - Développement et adaptation des règles de gestion existante pour reconstruire la plateforme existante et améliorer le rendu - Rédaction des spécifications techniques - Retro-ingénierie - Application de la méthode Scrum / kanban puis Scrum de Scrum - Création des index ElasticSearch et alimentation depuis Spark - Création du processus de gestion des offsets Kafka pour éviter la perte de données lors de la mise en production d'une nouvelle version - Support ElasticSearch / Kibana - Formation du reste de l'équipe (4 dév) avec un grand turnover Environnement technique : IntelliJ, Git, Jenkins, SonarQube, kafka, spark, spark-streaming, ElasticSearch, Kibana, Java, Maven
Consultant Big Data
IVIDATA GROUP
juil. 2017 - oct. 2018
1 an 4 mois
92300 Levallois-Perret, France
Technical Leader Développement Big data backend
Société Générale
oct. 2016 - juil. 2017
10 mois
Val de fontenay
- Développement de module de nettoyage de fichier - Création de business view métier - Migration d'un projet access / excel vers un projet Big data pluggé à Tableau SoftWare - Formation de Juniors sur le développement big data Environnement : Hortonworks, spark, scala, python, hive, oozie, hawq, sqoop, Tableau SoftWare
Technical leader Développement Web
Mondadori France
sept. 2016 - oct. 2016
2 mois
Neuilly-sur-Seine, France
- Développement d'une application de gestion des offres et produits du - Création du processus de workflows métier Environnement : Symfony, HTML5, css3, Javascript, Oracle
Technical leader
Outscale
mai 2016 - oct. 2016
6 mois
Neuilly-sur-Seine, France
- Développement d'application Big Data pour la mise en place du market Place d'OutScale Environnement : Python, scala, Javascript, HTML5, css3, kafka, MapR - Développement d'un outil de tests mongo et nodeJs Environnement : MongoDb, mongoose, express, nodeJs, javascript, HTML5, css3
Ingénieur java / J2E
INFOTEL
nov. 2012 - mai 2016
3 ans 7 mois
Région de Paris, France
Formation de 2 mois sur java - java J2E avec différent Frameworks (struts, spring, hibernate, jsf, RestFul). A l'issu de la formation, j'ai été placé sur différent projet : Développement IOS sur le projet "Mes comptes V3" pour BNP-Paribas et hello bank. Développement d'un framework HTML5/CSS3 javascript natif pour BNP-Paribas. Développement Java + framework javascript sur un projet Big Data à la Banque de France
Développeur / intégrateur web
Agence WHODUNIT
août 2011 - oct. 2012
1 an 3 mois
18 rue neuve des boulets 75011 paris
Whodunit est une agence web où l'ambiance est accueillante et chaleureuse. J'y ai appris énormément auprès de personnes compétentes. Bien que l'agence soit de taille humaine, la qualité des sites était notre priorité !
Développeur
Infotravel
sept. 2011 - mai 2012
9 mois
ESGI - paris
Infotravel est un site de reporter dirigé par R. KASSOUS (journaliste au nouvelObs). C'est un site sur le voyage (bon plan, les endroits à visiter, à ne pas visiter, etc.) C'est un projet école où nous devions nous intégrer dans l'équipe de journaliste afin d'améliorer le site et proposer des évènements. Projet extrêmement intéressant avec de fortes personnalités et qui m'a fait découvrir le milieu du journalisme qui est passionnant.
Développeur WEB chez WFinance
WFINANCE CONSEIL
oct. 2010 - août 2011
11 mois
Paris, France
Entreprise de Finance. J'étais en charge pendant mon alternance de gérer la mise à jour du portail entreprise et le développement de min-site. Je ne recommande pas cette entreprise pour une alternance orienté web.
Formation
ESGI
Master 2, Management, E-business et innovation
2010 - 2012
2 ans 1 mois
Univertsite Cergy Pontoise
Licence professionnelle, Communication et médias options Développeur Web
2006 - 2010
4 ans 1 mois