
KAMALRAJ Muruganathan
Ingénieur Big Data Senior | Apache NiFi
Salaire / Taux journalier
Île-de-France, France
Mobilité : Île-de-France
Freelance
Peut venir sur site
Expertises
Langues
À propos
Introduction
Ingénieur Big Data avec expertise approfondie en Apache NiFi, ETL et migration de données. Expérience confirmée chez Carrefour, Safran et CNP : automatisation CI/CD, Change Data Capture, optimisation de flux et migration MySQL/PostgreSQL. Spécialisé en Data Engineering sur cloud (GCP/AWS) avec maîtrise Java, Kafka et intégration de systèmes complexes pour fiabiliser vos pipelines de données.
Expérience de travail
Ingénieur Big Data - Consultant NIFI chez APICIL, Big Data
Groupe APICIL
juin 2024 - Présent
2 ans 5 mois
Paris, France
- Conception et développement de flux de données avec Apache NiFi. - Traitement et intégration de données depuis des bases MySQL (COSY). - Migration des flux et des données de MySQL vers PostgreSQL afin d’assurer la conservation et la maitrise des données en interne. - Alimentation et exploitation d’un Data Warehouse PostgreSQL. - Gestion et transformation des positions de comptes bancaires et assurantielles. - Génération de fichiers XML au format PENELOP pour les échanges applicatifs. - Automatisation, fiabilisation et supervision des flux de données. - Réalisation du mapping des champs des positions de comptes (PDC) banque et assurance. - Analyse des écarts et correspondances avec le modèle cible PENELOP v24. - Traduction des règles métier en règles de transformation des données. - Mise en conformité des données avec les normes d’échange PENELOP. - Contrôle de la cohérence des données migrées (MySQL → PostgreSQL). - Détection et traitement des anomalies de données.
Cours particuliers pour les collégiens et les lycéens avec l’association ASCES
Asces
sept. 2012 - Présent
14 ans 2 mois
93000 Bobigny, France
Cours particuliers pour les collégiens et les lycéens dans les matières scientifiques telles que Mathématiques, Physique-Chimie et Science de la vie et de la terre.
Ingénieur Big Data - Consultant Java - EBX chez CNP, Big Data
CNP
oct. 2023 - mai 2024
8 mois
92130 Issy-les-Moulineaux, France
- Création de tâches programmées dans EBX pour l’automatisation des traitements. - Conception et création de tables EBX adaptées aux modèles de données métier. - Développement de scripts Bash d’export des tables EBX pour intégration et sauvegarde. - Mise en place d’exports ODE des tables EBX avec gestion des règles de transcodification. - Développement de triggers en Java pour contrôler les données et automatiser les actions dans EBX. - Conception et implémentation de values functions en Java pour enrichir les règles EBX . - Création et maintenance des schémas XSD pour la structuration et la validation des données EBX. - Développement des classes Java de gestion des tables EBX via le classpath. - Réalisation et gestion de projets Maven Java pour packager et déployer les extensions EBX. - Création de transformations XSL pour les exports ODE avec mapping vers les formats cibles.
Ingénieur Big Data - Expert NIFI chez SAFRAN, Big Data, Change Data Capture
Safran Engineering Services
juil. 2023 - oct. 2023
4 mois
Châteaufort, France
- Data Engineering, Cloud AWS, SQL, API, SFTP, Debezium, Kafka, ETL NIFI. - Réalisation via Nifi d’un Change Data Capture entre la base db2 et SQL Server/NAS. - Conception des flux de données sur Nifi - Optimisation des performance Nifi. - Installation de la Nifi Registry - Installation du Toolkit Nifi. - Déploiement automatique des flux Nifi - CI/CD - Jenkins - Ansible - Script Shell
Ingénieur Big Data - Expert Technique
Carrefour
mars 2022 - juil. 2023
1 an 5 mois
91300 Massy, France
- Data Engineering, Cloud GCP, SQL, API, SFTP, GCP Bucket, ETL NIFI. - Déploiement et Maintenance des flux sur la plateforme Préprod et Prod de l’ETL Nifi. - Migration du Nifi 1.12 vers le Nifi 1.15. - Référent Nifi et Responsable de la plateforme Prod. - Automatisation des déploiements des flux Nifi via Jenkins, BitBucket, Vault et JFrog. - Analyse et Monitoring des Logs sur les Dashboard Kibana-Grafana
Formation
Sorbonne University - Pierre et Marie Curie
Master's Degree, Informatique, Science et Technologie du Logiciel
2014 - 2016
2 ans 1 mois
Pierre and Marie Curie University
Licence, Ingénierie informatique
2010 - 2014
4 ans 1 mois