Maxime Loyez
Data Engineer Senior | PySpark & Airflow
1 recommandation
Salaire / Taux journalier
1 personne recommande
Lille, France
Freelance, ouvert au CDI
Peut venir sur site
Expertises
Langues
À propos
Introduction
Data Engineer avec 5+ ans d'expertise en pipelines de données et architecture Big Data. Spécialisé en PySpark, Databricks et Airflow avec expérience chez OVHcloud et Decathlon. J'automatise vos flux de données, optimise la qualité et déploie des solutions cloud robustes pour maximiser la valeur de vos données.
Expérience de travail
Data Engineer
EnedisFreelance
janv. 2026 - déc. 2026
1 an
À distance
• Mise à niveau des flux Hadoop existants avec intégration de l’écriture dans S3 (PySpark) • Création et mise en place des tables et des vues dans Databricks (SQL) • Contrôle de la cohérence des données et diverses automatisations en Shell • Automatisation des transferts de données entre environnements en PowerShell (via webhdfs) • Utilisation de GitLab pour le versioning du code et le déploiement automatisé sur les différents serveurs • Travail en méthodologie Agile
Data Engineer
Decathlon FranceFreelance
oct. 2024 - janv. 2025
4 mois
Croix, France
▪ Mise en place de notebook de dev dans databricks ◦ Création de flux de données en pyspark dans Airflow ◦ Mise en place des cas de tests avant livraison en production ◦ Mise en place des Great Expectations (Qualité de données) ◦ Ajout de Github Action pour automatiser les déploiements + contrôle du code ◦ Mise en place de Makefile permettant divers tests / contrôles en local
Data Engineer
OVHcloudFreelance
sept. 2023 - oct. 2024
1 an 2 mois
59100 Roubaix, France
• Adaptation des requêtes SQL(sous dremio) en spark-scala • Déploiement et automatisation via Airflow • En charge de la migration Dremio • Développement de scripts Bash sous un environnement Linux. • Développement de scripts utilitaires pour l'application Dremio via l'API REST en python • Développement de scripts utilitaires pour l'application Tableau via l'API REST en python • Développement de scripts utilitaires pour l'application Dataiku via l'API REST en python • Méthodologie de travail en Agile
Consultant BI
La Poste GroupeFreelance
déc. 2022 - mars 2023
4 mois
Aide apportée dans le cadre d'un POC dremio-Tableau • Création de multiples VDS dans Dremio dans le cadre de tests de performances • Création de multiples dashboards basées sur les VDS et PDS de dremio dans l'application Tableau • Création de flux de données en pyspark dans Dataiku
Data Engineer OVH
Nova Technology
mai 2021 - déc. 2022
1 an 8 mois
Lille, France
• Adaptation des requêtes SQL(sous dremio) en spark-scala • Déploiement et automatisation via Airflow • En charge de la migration Dremio • Développement de scripts Bash sous un environnement Linux. • Développement de scripts utilitaires pour l'application Dremio via l'API REST en python • Développement de scripts utilitaires pour l'application Tableau via l'API REST en python • Développement de scripts utilitaires pour l'application Dataiku via l'API REST en python • Méthodologie de travail en Agile
Capgemini
juil. 2019 - mai 2021
1 an 11 mois
Lille, France
Data Engineer - Volkswagen Bank
sept. 2020 - mai 2021
9 mois
Lille, France
- Création des scripts Bash sous un environnement Linux dans un but d'intégration de données. - Création des requêtes PL/SQL pour communiquer avec une BDD oracle depuis un environnement Linux (via SQLPLUS) - Gestion d'un environnement Linux - Contrôle de la qualité des données. - Déploiement et automatisation avec Ansible Tower. - Amélioration d'un projet .NET déjà existant - Utilisation d'un GIT et TFS - Livraison de matière sur différents environnements.
Data Engineer
juil. 2019 - oct. 2020
1 an 4 mois
Data Engineer - Plateforme de données, Crédit Agricole Assurances
juil. 2019 - mai 2020
11 mois
Paris, France
- Peuplement de la plateforme - Ingestion en streaming et en batch des données, - Surveillance des pipelines streaming, - Contrôle de la qualité des données, - Livraison de matière en recette, qualification, pré production et production, - Mise en place d'outils automatisés pour le déploiement et l'installation de la matière, - Méthodologie de travail : Agilité à l’échelle
Formation Big Data
ASTON - École Informatique
mars 2019 - juil. 2019
5 mois
Lille, France
Worldline
juil. 2016 - oct. 2018
2 ans 4 mois
Seclin, France
Étudiant en alternance
nov. 2016 - oct. 2018
2 ans
Seclin, France
Alternance de 2 ans en tant que développeur. Ma mission est d'automatiser des tâches récurrentes au sein de mon équipe afin de permettre un gain de temps et de diminuer les erreurs humaines. Création d'applications en C# pour l'équipe. Amélioration d'un des sites web interne en Tapestry/Java. Amélioration d'un des sites web interne en Angular4-CLI Manipulation d'une base de donnée SQL/MySQL
Stage
juil. 2016 - oct. 2018
2 ans 4 mois
Seclin, France
Stage de 3 mois en tant que développeur.
Manutentionnaire
DECATHLON FRANCE
févr. 2016 - janv. 2017
1 an
59840 Lompret, France
CDI Répartition des colis pour les différents magasin et cariste.
Manutentionnaire
OXYLANE Logistique
déc. 2013 - janv. 2016
2 ans 2 mois
CDD Préparation des commandes clients: Rassembler et conditionner les produits correspondant à une commande.
Stage
Groupe IRCEM
juil. 2015 - oct. 2015
4 mois
59100 Roubaix, France
Stage de 3 mois en tant que développeur. Projet de groupe. Développement en C# d'une application de traitement de données sous Visual Studio. Séries de tests sur une BDD de test. Mise en production de l'application.
Formation
SUPINFO
2015 - 2018
4 ans
Ozanam
BTS
2012 - 2014
3 ans