
Salah Eddine LAHYAN
Senior Data Engineer | Tech Lead | Big Data
Salaire / Taux journalier
Paris, France
Mobilité : Île-de-France
Freelance
Peut venir sur site
Expertises
Langues
À propos
Introduction
Data Engineer specializing in Big Data solutions with expertise in building scalable data pipelines and analytics infrastructure. Graduate of ENSEEIHT & Grenoble EM, combining technical engineering skills with business acumen. I deliver end-to-end data engineering solutions that transform raw data into actionable insights for data-driven decision making.
Expérience de travail
Senior Consultant Data Engineer & Tech Lead
Société Générale
sept. 2024 - Présent
2 ans 2 mois
Paris, France
Migration d’une architecture Oracle/ExaData vers une architecture Big Data datalake pour le calcul du risque de taux d'intérêt (IRR) et de change (FX) • Lead technique sur le périmètre IRR (Interest Rate Risk) & FX (Foreign Exchange) • Développement et orchestration des jobs Spark pour le calcul de nouvelles métriques • Conception, mise en œuvre et déploiement en Prod continue de solutions techniques • Migration des pipelines CI/CD sur les environnements (DEV, HOMOL, KLI, PROD) • Migration technique des applications Spark / Scala (montée de version, refactoring ..) • Optimisation des jobs Spark (temps d’exécution, tuning Spark, optimisation des fichiers) • Gestion et optimisation du Data Lake (Cloudera) et incidents production N3 : analyse, diagnostic, correctifs et amélioration continue. Environnement technique : Scala, Java, python, Spark, Databricks, Hadoop, Cloudera, Oozie, Hive, Jenkins, Github actions CI/CD, Github, Postman, SQL, DBT, Maven, Oracle, Clickhouse, AWS S3, Scrum
Consultant Big Data Engineer
Sopra Steria Next
janv. 2023 - sept. 2024
1 an 9 mois
Paris, France
Mission Data Engineering : Migration et amélioration de l’application Selfim de la détection de fraudes des véhicules | Ministère de l'intérieur et des outre-mer, Projet Selfim • Implémentation des algorithmes/typologies de détection de fraudes dans Selfim • Reconstruire toute la chaine de données de bout en bout afin d’assurer la bonne transmission des données depuis le SIV (Système d'Immatriculation des Véhicules). • Orchestration des jobs, alerting et monitoring Environnement technique: Python, Airflow, Spark, SQL, DBT, superset, OpenShift, Linux, Elastic Search, cloud, Vertica, S3, Gitlab CI/CD, Docker, Scrum
Data Engineer
Société Générale Corporate and Investment Banking (SGCIB)
mars 2021 - déc. 2022
1 an 10 mois
Paris, France
Projet SFTR - Développement des jobs spark pour récupérer et transformer les Alive Deals depuis Datalake et réalisation d’un outil de monitoring automatisée • Développement et configuration des jobs Spark pour le projet SFTR : extraction des transactions financières depuis le Data Lake, traitement selon les spécifications fonctionnelles, et stockage optimisé en Parquet dans la couche DAAS du Datalake (Azure + On Premise). • Optimisation des traitements et amélioration des performances • Orchestration des jobs Spark et déploiement automatique en Dev et Prod • Monitoring et visualisation des données sur ElasticSearch et Kibana. • Être le représentant du département sur le programme Unity, qui vise à homogénéiser l’ensemble des processus d’ITSM à travers les DSI du groupe : o Piloter un groupe de testeurs de l’outil Unity en UAT puis Pré-Prod. o Migrer et piloter le changement des applications. Environnement technique : Java, Spark, Scala, Hadoop, Cloud Azure, Oozie, Hive, Elastic Search Kibana, Linux Shell, Maven, Spring-Boot, SQL, SG Monitoring, Scrum
Formation
INP-TOULOUSE
Master en PERFORMANCE IN SOFTWARE, MEDIA AND SCIENTIFIC COMPUTING, Systèmes Logiciels & Distribués
2020 - 2021
1 an
INP-ENSEEIHT
Diplôme Ingénieur en Informatique, Systèmes Logiciel et Big Data
2018 - 2021
3 ans
Résultat : Bac +5
Licences et certifications
Databricks Certified Data Engineer Associate
Délivré le : août 2025
Databricks Certified Associate Developer for Apache Spark 3.0
Délivré le : juil. 2024