
ibrahim lahouar
Big Data Engineer
Salaire / Taux journalier
78300 Poissy, France
Freelance
Peut venir sur site
Expertises
Langues
À propos
Introduction
Ingénieur Big Data avec 5+ ans d'expertise chez Crédit Agricole CIB et Assystem. Spécialisé dans l'implémentation de pipelines Spark, architectures microservices et solutions d'IA pour les RH. Expert Java/Python avec maîtrise complète de la stack moderne (Kafka, Docker, Angular) pour des projets d'envergure.
Expérience de travail
Data Engineer / Devops
Crédit Agricole Corporate and Investment Bank
juin 2025 - Présent
1 an 5 mois
Paris, France
La solution Data Warehouse vise à centraliser les données de toutes les applications de CACIB, ce qui permet aux partenaires de les utiliser de manière sécurisée et unifiée. Jui 2025 - Present Data Engineer / Devops Taches et résponsabilités : Intégrer des flux de données provenant de plusieurs sources vers le Data Warehouse. Accompagner les partenaires pour l'intégration de leurs données et la gestion des accès. Aider les Data Analysts dans la réalisation de leurs différents rapports. Assurer la maintenance et la mise à jour des clusters Kubernetes avec l'équipe infra. Piloter les livraisons en production (2 fois par semaine). Résoudre les incidents en production et assurer le MCO. Création et amélioration de la performance des DAGs Airflow. Collaborer avec l'équipe Data Quality pour mettre en place des règles automatisées via OpenMetadata. Adapter des opérateurs Airflow spécifiques pour répondre à des besoins techniques particuliers. Environnement Technique : Kubernetes (kubespray), AirFlow, ArgoCD, Postgres, DBT, S3, OpenMetadata, Superset, Dynatrace, Kibana, Grafana, Jupyter, GitLab, GitLab CI/CD, Jira, Agile (Scrum).
Big Data Engineer
Crédit Agricole CIB
oct. 2024 - Présent
2 ans 1 mois
Paris, France
Le projet Bâle IV répond aux obligations réglementaires imposées par la Banque Centrale Européenne concernant le calcul des risques de marché. Ce système critique agrège, transforme et restitue de très grands volumes de données financières issues de multiples sources (marché, référentiels, valorisations, PnL, etc.) grâce à des traitements distribués à haute performance. Taches et résponsabilités : Traitement technique : Gestion et résolution de problématiques complexes, notamment l'optimisation des traitements Spark (Java/PySpark) sur infrastructure on-premise. Optimisation pipelines CI/CD : Amélioration continue des workflows Argo Workflows intégrés au processus CI/CD piloté par ArgoCD, pour garantir performance et stabilité. Gestion de crises : Interventions rapides et efficaces sur des problématiques fonctionnelles sensibles ou urgentes (analyse, développement, correction de bugs critiques). Exploration et Debugging PySpark : Utilisation de Jupyter Notebook pour investiguer, déboguer, explorer des jeux de données complexes et réaliser des preuves de concept techniques. Gestion du flux Git et revues de code : Support actif à la gestion des branches, tagging, déploiement et réalisation de code reviews, en relais ponctuel du Tech Lead principal. Support production (N3) : Contribution occasionnelle au support de niveau 3 incluant analyse et résolution rapide d'incidents en environnement de production. Bonnes pratiques : Accompagnement technique de l’équipe sur la gestion de la qualité logicielle et l'application des bonnes pratiques. Environnement Technique : Kubernetes (K9s), Argo Workflows, ArgoCD, Oracle, Spark (Java & PySpark), SpringBoot, Jupyter, GitLab, GitLab CI/CD, Jira, Agile (Scrum).
Ingénieur Java / Big Data
EDF
sept. 2021 - déc. 2024
3 ans 4 mois
92400 Courbevoie, France
Participation à la conception et la réalisation de Emoby, une solution au service des ressources humaines, destinée au sourcing et à la réalisation de cartographie des compétences. Taches et résponsabilités : - Participation à la conception des nouvelles fonctionnalités. - Implémentation d'un pipeline d'acquisition des CVs et des rapports d'activités. - Implémentation des batches spark de génération des cartographies de compétences et de métiers. - Participer au développement d'une application web de restitution (recherche des candidats pour un besoin spécifique et la génération des cartographies).
Développeur Full Stack
Assystem
janv. 2022 - mai 2022
5 mois
92400 Courbevoie, France
Conception et le développement d'une solution Web conçue pour détecter automatiquement des données relatives à des équipements dans des documents. Taches et résponsabilités : - Conception de l'architecture globale et sélection des technologies (Java, Angular, RabbitMQ, Docker, etc.). - Développement et intégration des services backend et frontend, y compris la mise en place de bases de données et l'interface utilisateur. - Dockerisation de l'ensemble des services pour faciliter le déploiement. - Réalisation de tests complets (unitaires, d'intégration). - Configuration des environnements de développement.
Stagiaire Java / Big Data
Assystem
avr. 2021 - oct. 2021
7 mois
Rouen, France
Conception et développement d'une application de planification des interventions sur les centrales nucléaires. Pour chaque intervention, des simulations avec plusieurs paramètres sont lancées afin de proposer le meilleur plan d'execution.
Formation
Universite de Lorraine
2ème année Master en Génie Informatique et Interaction Humain-Machine
2020 - 2021
1 an 2 mois
ESISA - École Supérieure d'Ingénierie en Sciences Appliquées
1ère année Master en Ingénierie des Systèmes d'information
2019 - 2020
11 mois
ESISA - École Supérieure d'Ingénierie en Sciences Appliquées
Diplôme Licence en Ingénierie Logicielle
2016 - 2019
2 ans 11 mois