
reda biramane
Senior Data Engineer
Salaire / Taux journalier
Lille, France
Freelance
Peut venir sur site
Expertises
Langues
À propos
Introduction
Senior Data Engineer avec +10 ans d'expertise en pipelines ETL, Big Data et architectures cloud pour secteurs Bancaire/ Marketing / Retail . Spécialisé en Semarchy XDI/Stambia , Databricks, ELK Stack, et solutions temps réel avec Python/Spark. J'optimise vos flux de données et transforme vos défis techniques en solutions performantes et évolutives.
Expérience de travail
Senior Data Engineer
ExotecFreelance
juil. 2025 - Présent
1 an 4 mois
Croix, France
Contexte : Dans le cadre d’un projet stratégique de migration de Dynamics 365 Business Central vers SAP, j’ai contribué à la conception et à la mise en place des processus de migration et de validation des données. Conception et déploiement de pipelines de données pour extraire, transformer et charger les objets issus de Business Central vers des templates XML prêts à l’import dans SAP. Développement de requêtes BigQuery afin de contrôler la qualité, la complétude et la cohérence des données avant leur intégration. Orchestration et industrialisation des transformations SQL avec DBT . Automatisation Python pour la génération et le formatage des fichiers d’import SAP, réduisant considérablement les erreurs manuelles et accélérant le processus d’intégration. Cette approche a permis de sécuriser la migration, de réduire les délais de traitement et d’optimiser la qualité et la fiabilité des données intégrées dans SAP. Environnement technique Python DBT BIG QUERY
Senior Data Engineer
BPCE Solutions informatiquesFreelance
sept. 2024 - juil. 2025
11 mois
Villeneuve-d'Ascq, France
Contexte : Intégré à l’équipe ODS (Operating Data System), en charge du traitement et de la modélisation des flux bancaires pour la Caisse d'Épargne, j’ai participé à la conception, au développement et à l’industrialisation de pipelines de données via Stambia / Semarchy XDI, dans un environnement agile. Missions clés : -Recueil et formalisation des besoins métiers pour la gestion et l’intégration des données. -Rédaction des spécifications techniques détaillées à partir des exigences fonctionnelles.- -Modélisation des données sous PowerDesigner afin d’assurer la cohérence des modèles. -Développement de flux ETL robustes et optimisés avec Stambia / Semarchy XDI et Oracle (SQL/PLSQL). -Exécution des tests de validation (recette) et accompagnement à la mise en production. -Analyse d’impact des évolutions métiers sur les flux existants. -Maintenance évolutive et corrective des composants : correction d’anomalies, optimisation des traitements. -Gestion du versioning et des déploiements automatisés via Git, Bitbucket, Jenkins, XLR-Deploy. Environnement technique : Windows, UNIX, Oracle SQL/PLSQL, Stambia / Semarchy XDI, PowerDesigner, Jenkins, Bitbucket, Git, XLR-Deploy, JIRA, Confluence
Senior Data Engineer
Mondial RelayFreelance
nov. 2023 - mai 2024
7 mois
Villeneuve-d'Ascq, France
Data Locker France (Contexte international) Équipe Data - 3 membres Dans le cadre de ma mission au sein de l'équipe Data dans l’équipe Locker Mondial relay France, j'ai contribué activement à la transformation numérique et à l'optimisation des opérations grâce à mon expertise en ingénierie des données. Mes principales réalisations comprennent : -Développement et automatisation sur Databricks : Conception de scripts Python et Spark pour automatiser la surveillance en temps réel. Cela inclut la gestion des alertes pour les passages de batteries des lockers, les erreurs de communication, le déclenchement des sirènes, et le suivi de la température interne des lockers. -Automatisation de l'historisation des données CRM vers BigQuery : Mise en place d'un pipeline pour le transfert et l'analyse des données, incluant des requêtes d'extraction spécifiques selon les besoins opérationnels. -Développement de rapports BI sur Power BI : Création de tableaux de bord interactifs pour l'équipe support, facilitant le suivi du déploiement des lockers et la gestion des tickets d'incidents. -Automatisation des flux de données : Utilisation de Python sur Google Cloud Platform (GCP), notamment via Cloud Functions, et intégration de processus métier en low-code (Integromat/Make, Power Automate) pour générer des alertes via webhooks sur Teams. - CRM Pipedrive : Développement de webhooks et API pour l'extraction de données en temps réel et le suivi des modifications dans le CRM, ainsi que leur intégration dans un système de suivi des contrats signés (Google Sheets/App Script) pour l'équipe de déploiement. Cela a permis d'automatiser le suivi des affaires en cours et d'assurer une vue globale en intégrant les données de nos partenaires installateurs. Compétences Clés. : Databricks, Python, BigQuery, Google Cloud Platform (GCP), Pipedrive CRM, MAKE (Integromat), Power BI, Power Automate,APP Script .
Senior Data Engineer
WorldlineFreelance
mars 2023 - déc. 2023
10 mois
Seclin, France
Rattaché à plusieurs projets de statistiques Big Data pour de grands FAI (tels que SFR, APNF - Association des Plateformes de Normalisation des Flux Inter-Opérateurs, La Poste Messagerie et RENATER - Réseau National de Télécommunications pour la Technologie, l'Enseignement et la Recherche), je contribue activement à l'élaboration de solutions de pointe en gestion de données. Mes responsabilités englobent : • Pilotage d’une installation d’une chaine ELK • Transcription des besoins fonctionnels en besoins techniques ELK ( dimensionnement, mise en place de la chaine ETL ) : o Configuration, installation du Kibana dans sa globalité ( espaces/rôles/user ect ) o Configuration, installation du Logstash dans sa globalité ( pipeline, mapping, découpage du flux ect ) o Configuration, installation, test de l’Elasticsearch ( Création/config des mapping /datastream/ILM/component template) • Monitoring et supervision de la chaine dans sa globalité (RUN + patchManagement) o Création et développement de traitements de statistiques en python et logstash basés sur des sources dans Elasticsearch . o Exportation des données des index et datastreams Elasticsearch sur amazon S3 et des fichiers CSV o Intégration et traitement de données provenant de diverses sources telles que Filebeat, logs, SFTP, AMQ, KAFKA et APIs, et leur préparation pour Elasticsearch et Kibana (enrichissement, nettoyage, qualité des données, normalisation, GeoIP) . o Optimisation de la répartition des données sur plusieurs canaux et mise en œuvre de stratégies d'intégration via les tags FileBeat. o Appliquer les techniques de gestion de projet : Planning (spécifications, développements, tests, mises en production), estimation de charges. Compétences : Red Hat Linux · CentOS · Filebeat · Logstash · Elastic Stack (ELK) · Kibana · KAFKA · Extract, Transform, Load (ETL),Script Shell Python · Apache Spark ·
Data Engineer
EQIOM, A CRH Company
sept. 2022 - mars 2023
7 mois
Lille, France
Acteur majeur dans les matériaux de construction.EQIOM actifs dans 4 domaines d'activités : la production de ciments, de granulats, de bétons prêts à l'emploi et le traitement et la valorisation de déchets . Au cœur de la team DATA & BI, ma mission : -Traitement des données webanalytics (Pour analyser le comportement et l'activité des clients) en temps réel à partir de Matomo . -Configuration des data streams d'ingestion basée sur Logstash. -Gestion des index ElasticSearch et la création des Dashboards KIBANA -Création des alerts et Activation d’audit sur KIBANA. -Création de script pour récupérer les données en cas d'échec du traitement en temps réel. -Migration de ELK 7.12 VERS 8.4 -Update & Correction des Dashbored sur Qlikview selon le besoin des utilisateurs . Compétences : ElasticSearch,Kibana,logstash,Qlikview
Data Engineer
User.com
nov. 2021 - août 2022
10 mois
Lille, France
Editeur des CDP's sur-mesure , Marketing 1BY1 est une Customer Data Solution (CDS) qui s’adapte aux données clients pour piloter leurs indicateurs marketing et commerciaux, cibler efficacement les campagnes d’acquisition ou de fidélisation et activer les consommateurs en omnicanal. Mission pour les clients Marketing1by1 : - Intégration de données dans MongoDB via un ETL basé sur petl (Python) - Traitement des données (IN/OUT ou calcul/Mise à jour) sur MongoDB via Javascript - Modélisation base de données - Développement Python, création d'outils, automatisation des tâches - Export vers AWS Redshift
Data Engineer
EPSILON France
juin 2018 - oct. 2021
3 ans 5 mois
Lille, France
Au sein d’une équipe dédiée aux clients internation aux grands comptes. J'ai pu travailler sur de la mise en place de processus de data flow et l’écriture de programmes de calcul d’indicateurs métiers et business. Ma mission est de mettre en place des solutions et programmes permettant aux clients de valoriser, exploiter et produire leurs données CRM. Mon rôle et réalisations : - Développement de procédures stockées - Requêtage et modélisation sous SQL /T-SQL - Rédiger les spécifications techniques associées. - Réaliser les travaux de développement dans le respect des best practices internes. - Participation aux campagnes de recettes du client - Réaliser et formaliser les tests/recette des travaux produits - Tests fonctionnels et techniques : les flux SSIS et bases de données SQL server. - Support aux équipes TMA - Developpement des flux des données pour la direction Marketing avec SSIS/STAMBIA - Contribtion a la mise place de processus CRM (Intégration,Qualification, Enrichissement,Aggregation des données ...) pour des fins de ciblage ,segmentation, campagnes ,Reporting BI)... -Development des scripts Python -Intégration des données entrantes de nos partenaires Data (TinyCLues,RelevanC ,Target2Sell T2S ,Critizr,Captain wallet...)
Data Engineer
Sopra Steria
sept. 2017 - mai 2018
9 mois
Lille, France
Sur le périmètre du Crédit à la Consommation, le centre de services Sopra-Steria, pour le compte d'Euro Information (Filiale du groupe Crédit Mutuel), accompagne les différentes filiales du groupe Cofidis (Cofidis France, Cofidis Espagne, Cofidis Portugal, Cofidis Belgique, etc ...) dans leurs besoins IT. Ma mission, accompagner le CDS dans ses activités d’analyse, de rédaction de spécification technique, de développement et de qualification. Missions : - études d’impacts, - analyse de spécifications, - rédaction de spécifications techniques, - conception et développements de flux d’échange de données sous ODI, - conception et développements de flux d’échange de données sous STAMBIA, - réalisation de reporting BO, - tests unitaires et qualification, - suivi de production, - suivi d’activité,` Environnement technique : BDD : IBM Netezza / HP Vertica ETL: ODI / STAMBIA Outils de reporting : SAP Business Object, Qlikview
BNP Paribas
mars 2014 - oct. 2017
3 ans 8 mois
Casablanca, Maroc
Ingénieur en informatique décisionnelle
oct. 2014 - oct. 2017
3 ans 1 mois
Casablanca, Maroc
Au sein de la Direction des risques : - Développement des rapports Business Objects pour le suivi de la production et suivi de la clientèle BMCI -Création des scripts SAS et UNIX pour l’automation de l’exécution des demandes -Elaborer les Reporting bancaires relevant de l’activité Risques - Contribuer à la performance des systèmes d’octroi en production et assurer leur amélioration continue via les suivis et des analyses . -Développements des requêtes industrialisées Mise à disposition de la Direction des risques des données/statistiques bancaires au préalable de la prise de décision -Développement des requêtes de pilotage et Analyse des données requetés - Suivre périodiquement les systèmes décisionnels existants et ajuster ou procéder à le refonte de ces systèmes si nécessaire. - Analyser la qualité des portefeuilles client, afin d'identifier et de mesurer le risque. - Analyser les bases de données afin de réaliser des opérations marketing.
Internship
mars 2014 - oct. 2014
8 mois
Casablanca, Maroc
- Projet : Automated Reporting Automatisation et calcul des rapports de la direction risque . - Technologies: -Java/Java EE -Presentation framework: JSF2.0 -Serveur d'application : Tomcat 7. -SGBD : MySql -Persistance : Hibernate -Component Architecture : Spring 3.0( spring security) -IDE: eclipse Indigo, Modélisation: UML.
Internship
Sofrecom
août 2013 - oct. 2013
3 mois
Technopolis
la refonte des interfaces Jsp à des pages Jsf 2.0 /Primefaces
Formation
Ecole High-Tech
BAC +5
2009 - 2014
5 ans 1 mois
Licences et certifications
Test of English for International Communication (TOEIC)
Délivré le : oct. 2023
Scrum Foundations Professional Certificate (SFPC)
Délivré le : mai 2020
Développeur Full Stack BIG DATA
Délivré le : janv. 2020
Python for Data Science and Machine Learning Bootcamp
Délivré le : janv. 2017