Miora Rabearivelo
Data Engineer spécialisé en Big Data
Salary / Daily rate
Antananarivo, Madagascar
Mobility: France, London, ...
Freelance, open to permanent contract
Remote only
Skills
Languages
About me
Intro
Data Engineer et Big Data Developer avec une expérience dans la conception de solutions big data, je développe et mets en œuvre des solutions de traitement de données à grande échelle. Compétent en gestion de données volumineuses, en optimisation des performances et en architecture de système. Passionné par l’innovation technologique et les défis complexes des données.
Work experience
Pulse
Mar 2023 - Apr 2026
3 years 2 months
Betroka, Madagascar
Software Engineer
Mar 2023 - Apr 2026
3 years 2 months
Betroka, Madagascar
• Concéption et développement de scripts Python sur mesure pour automatiser des tâches répétitives, réduire les interventions manuelles et améliorer l'efficacité opérationnelle. • Optimisation et refactorisation des scripts existants en appliquant les bonnes pratiques de développement (structuration du code, modularisation, gestion des erreurs), entraînant une amélioration notable des performances et de la maintenabilité. • Mise en place et exécution de tests unitaires et fonctionnels pour assurer la robustesse, la stabilité et la conformité des modules aux spécifications.
Cloud for Data egineer
Mar 2023 - Apr 2026
3 years 2 months
Antananarivo, Madagascar
• Conception et mise en œuvre d'un processus ETL automatisé pour collecter, transformer et charger les données depuis Amazon S3 vers Amazon Redshift. • Utilisation de AWS Glue (Pyspark) pour le catalogage, la préparation et la transformation des données à grande échelle. • Orchestration et planification des traitements via Apache Airflow pour garantir la fiabilité et la répétabilité des flux. • Optimisation des temps de chargement et des performances de requêtes dans Redshift. • Mise à disposition de données prêtes à l'analyse pour des tableaux de bord interactifs dans Power BI. Mise en place de pipelines de données sur Azure en exploitant : • Blob Storage comme data lake pour centraliser et historiser les données brutes, • Delta Lake pour fiabiliser les traitements de Donnée • Databricks pour le traitement distribué et l'optimisation des jobs PySpark/Spark, • Azure Data Factory pour l'orchestration et l'automatisation des flux ETL, • Entra ID pour la gestion des identités et la sécurisation des accès.
Education
Université CNTEMAD Antananarivo
Master 2 , Bases de données & Génie logiciel
2022 - 2022
1 year
• Conception, modélisation et administration de bases de données relationnelles. • Analyse, conception et développement d’applications logicielles. • Architecture des systèmes d’information et ingénierie logicielle. • Modélisation des données et optimisation des performances des bases de données. • Gestion de projets informatiques et application des bonnes pratiques de développement. • Assurance qualité logicielle, tests et maintenance des applications. • Analyse de données et mise en œuvre de solutions décisionnelles.
Université CNTEMAD Antananarivo
Master 1 , Bases de données & Génie logiciel
2020 - 2020
1 year
• Acquisition des fondamentaux en bases de données et en génie logiciel. • Conception et modélisation de bases de données relationnelles (MCD, MLD, SQL). • Analyse et conception de systèmes d’information. • Développement d’applications orientées objet et programmation avancée. • Méthodes et outils de génie logiciel pour la conception et la maintenance des applications. • Gestion des données, optimisation des requêtes et intégrité des informations. • Initiation à la gestion de projets informatiques et aux méthodologies de développement.
Université CNTEMAD Antananarivo
Licence, Bases de données & Génie logiciel
•Acquisition des fondamentaux de l’informatique, des bases de données et du développement logiciel. •Conception et modélisation de bases de données relationnelles. •Programmation et développement d’applications informatiques. • Analyse et conception de systèmes d’information. • Administration et gestion des données. • Utilisation des langages de programmation et des systèmes de gestion de bases de données (SGBD). • Application des méthodes et bonnes pratiques de développement logiciel. • Réalisation de projets académiques en développement et gestion de données.