
Noumou BARRY
Senior Cloud Data Engineer
Salaire / Taux journalier
Paris, France
Freelance, ouvert au CDI
Peut venir sur site
Expertises
Langues
À propos
Introduction
Ingénieur Cloud Data avec 8+ ans d'expertise en architectures Big Data et transformation digitale dans la finance. Spécialisé dans les migrations cloud Azure/AWS, développement de pipelines Spark/Scala et automatisation de processus réglementaires. Expert en solutions end-to-end alliant Python, React et infrastructures cloud pour optimiser vos projets data.
Expérience de travail
Senior Data engineer cloud
Nexans
sept. 2024 - Présent
2 ans 2 mois
92400 Courbevoie, France
Le projet visait à automatiser la génération du rapport réglementaire annuel relatif à la taxonomie européenne pour les activités durables : collecter et identifier les données pertinentes à partir des systèmes d’information existants afin de calculer et de déclarer les revenus éligibles et alignés avec les objectifs du Pacte Vert pour l’Europe. Le projet poursuivait deux objectifs principaux : assurer la réalisation de l’exercice 2024/2025 en construisant un outil minimal mais opérationnel, puis développer une application web plus adaptée et conviviale. 1. Nous avons développé un outil simple et entièrement configurable, reposant principalement sur des fichiers Excel et des scripts Python. Le script principal s’exécute sur Databricks, en lisant un fichier Excel semi automatisé contenant des sources dynamiques, des données de référence statiques, ainsi que la configuration du workflow décrivant les transformations/enrichissements de données à appliquer. Le résultat se présente sous forme de plusieurs fichiers Excel regroupant les chiffres officiels ainsi que des tableaux intermédiaires à des fins d’analyse et d’audit. 2. En réutilisant le même mécanisme de workflow pour enrichir et transformer les données, nous avons mis en place l’application web au sein de l’écosystème Microsoft Azure. Le code applicatif backend reste développé en Python, interagissant avec une base de données Cosmos DB et exposant des méthodes API appelées par une application web frontend développée en React/Node.js pour l’interface utilisateur.
Senior Data Engineer
MARGO Analytics
mai 2022 - Présent
4 ans 6 mois
Paris, France
Senior Data Engineer
Societe Generale Corporate and Investment Banking - SGCIB
mai 2022 - janv. 2025
2 ans 9 mois
Paris, France
Au sein du l’entité GBSU /CLD/DCI qui regroupe les services aux bénéficiaires distribués via la plateforme SG Market, les outils d’analyses de performance commercial et le CRM. Le Domaine CProfit prend plus particulièrement en charge les outils permettant de consolider et mettre à disposition des équipes commerciales les opérations réalisées sur produits financiers de la banque d'investissement. Méthodologie agile. Sprint de 3 semaines. Projet Move to Cloud : ● Mettre en œuvre la refonte du Back-end autour des technologies BigData en intégrant les principes Digitaux. ● L'accroissement des axes afin d'améliorer les capacités d'analyse et de restitution ● L'automatisation des processus de consolidation et de production des indicateurs Réalisations : ● Définition des solutions d'architecture dans l'environnement applicatif (Cloud Platform / Spark Data processing). ● Développements d'alimentations et processing de données ● Optimisation des jobs spark / scala. ● L’implémentation des solutions pour l'exploitation des données, restitution dans des Datasets ou Datamarts adéquats ● Scheduling des jobs sur Aiflow
Data Engineer
Groupe BPCE
janv. 2020 - mai 2022
2 ans 5 mois
Au sein du service ALM & Liquidité, dédié au développement des applications de reporting. Méthodologie agile. Sprint de 3 semaines. Projet GRAAL : ● L'amélioration de la qualité des indicateurs ALM Groupe (meilleure gestion des intra-groupes) ● Le renforcement des contrôles et rapprochements comptable entre FINREP, LCR ● L'accroissement des axes afin d'améliorer les capacités d'analyse et de restitution ● L'automatisation des processus de consolidation et de production des indicateurs Réalisations : ● Architecture technique + processus métiers permettant la mise à disposition et consultation des données ● Récupération des fichiers de transcodification, mapping avec les indicateurs ALM et stockage dans Hive ● Extraction des fichiers sous format xls en fonction des indicateurs depuis hive et stockage dans hdfs
Natixis
mai 2016 - déc. 2019
3 ans 8 mois
Data Engineer
oct. 2016 - déc. 2019
3 ans 3 mois
Mise en place du Data Lake avec 3 sources de données: -Développement d’un composant, fonctionnalités : -Souscription à des api, capable d’écouter des échanges entre les différentes composant de l’architecture générale de eBusiness Fx (JMS, Rendez-vous) pour récupérer de la data. -Pusher toutes cette data dans différents topics kafka. Ce composant est hors de l’eco système Hadoop. Technologies : Java, Spring, Apache kafka -Développement des modules consumers : -Récupération des messages pusher dans les topics kafka. -Traitement de la données avec le framework spark (partitionnement, compression et insertion dans Hive, Hdfs).
Big Data Engineer
mai 2016 - oct. 2016
6 mois
Missions : Faire un POC pour la mise en place d’un data Lake au sein du eBusiness Fx. -Proposition d’une architecture Big Data : Architecture Lambda. -Choix des différentes technologies . -Études des modules principaux de Hadoop et les différents composants basés sur les projets Apache : Spark, Kafka, Hive, Ambari, Cassandra, Hbase, Hcatalog… -Études comparatives des différentes base de données NoSQL -Restitutions : Dbeaver, SqlDbx, Power Bi, Tableau sofware, Excel.
Formation
Université Paris Dauphine - PSL
Master Mathématiques, Informatique, Décision et Organisation
2014 - 2016
3 ans
Université Denis Diderot (Paris VII)
Master en Ingenierie Informatique
2013 - 2014
2 ans
Université Paris Descartes
Licence Informatique
2010 - 2013
4 ans