Data Engineer - Freelance

Contexte

Nous recherchons un freelance pour Paris.

Pour réaliser cette ambition, la Data n'est pas un simple support : elle est la source de vérité qui guide chaque prise de décision et modèle l'innovation de notre écosystème. L'équipe Core Data Product HR est au centre de cette dynamique. Son rôle est capital : garantir l'accessibilité, la fiabilité et la qualité des données qui alimentent la performance financière de l'entreprise.

Notre équipe est composée d'un Product Manager et de plusieurs Data Engineers. Elle est en lien avec ses consommateurs de donnée et s'impose de bien comprendre les besoins analytiques. Au sein de cette équipe, nous cultivons l'excellence technique, l'impact business et une collaboration sans aucune frontière.

En tant que Data Engineer au sein de l'équipe Core Data Product HR, vous êtes une personne engagée, dynamique et proactive avec une forte appétence Business. Vous ne vous contentez pas de maintenir des pipelines ; vous les concevez pour générer de la valeur et accélérer l'innovation sur notre écosystème. Vous rejoignez l'équipe à un moment clé où nous menons une revue globale de notre modélisation et de notre architecture. Vous jouerez un rôle pivot dans le succès des nouveaux projets d'intégration d'outils et l'évolution de nos systèmes.

Missions

• Concevoir, construire et maintenir des infrastructures et des pipelines robustes et performantes.

• Garantir une architecture et une modélisation des flux optimisés et évolutives.

• Apporter une expertise et aider l'équipe à prendre les meilleurs choix techniques.

• Transformer la stack legacy vers les nouveaux standards de la Data Platform.

• Assurer la qualité, la fiabilité et la gouvernance des données Finance.

• Maîtriser la qualité du code et promouvoir les meilleures pratiques.

• Collaborer en environnement Agile au sein d'une équipe internationale (Anglais).

• Garantir un RUN de qualité (SLA) selon le principe "You build it, you run it".

• Respecter les engagements de sprint et s'inscrire dans une démarche d'amélioration continue.

• Garantir l'intégrité et la confidentialité des données sensibles, ainsi que le contrôle des accès.

Outils & Environnement

1. Plateforme Data Core (Cloud & Gouvernance)

   • Expertise sur DataBricks pour la gestion des clusters, l'optimisation des performances des workloads Big Data et la mise en place d'une gouvernance solide.

2. Langages & Modélisation

   • Maîtrise avancée et pratique SQL pour la modélisation et l'interrogation des données.

   • Une expérience avec DBT (Data Build Tool) serait un plus.

   • Maîtrise avancée et pratique de PySpark pour la transformation et le traitement de données.

3. Orchestration & MLOps

   • Solide expérience avec Airflow pour la création, le monitoring et l'optimisation des DAGs complexes garantissant la fiabilité de notre chaîne de production Data.

4. Méthodologie & Qualité

   • Travail en environnement agile (Scrum/Kanban).

   • Pratique quotidienne de la revue de code et des principes de CI/CD (intégration et déploiement continus) via des outils comme GitHub.

   • Maîtrise des contraintes RGPD et des méthodes associées (encryption, masquage, suppression des données).

5. Communication Internationale

   • Maîtrise de l'anglais indispensable pour interagir au quotidien avec notre équipe internationale et nos partenaires globaux.

Compétences clés

• PYTHON : Expert

• PYSPARK : Confirmé

• DBT : Élémentaire

• AGILE : Confirmé

• GITHUB : Confirmé

• Optimisation SQL : Expert

• AWS : Avancé

• DATABRICKS : Confirmé

• Apache Airflow : Confirmé

Langues

• Anglais courant

1. Expertise sur DataBricks pour la gestion des clusters, l'optimisation des performances des workloads Big Data et la mise en place d'une gouvernance solide
2. Maîtrise avancée et pratique de SQL pour la modélisation et l'interrogation des données
3. Une expérience avec DBT (Data Build Tool) serait un plus
4. Maîtrise avancée et pratique de PySpark pour la transformation et le traitement de données
5. Solide expérience avec Airflow pour la création, le monitoring et l'optimisation des DAGs complexes
6. Travail en environnement agile (Scrum/Kanban)
7. Pratique quotidienne de la revue de code et des principes de CI/CD via des outils comme GitHub
8. Maîtrise des contraintes RGPD et des méthodes associées (encryption, masquage, suppression des données)
9. Maîtrise de l'Anglais indispensable pour interagir au quotidien avec une équipe internationale
10. PYTHON Expert
11. PYSPARK Confirmé
12. DBT Élémentaire
13. AGILE Confirmé
14. GITHUB Confirmé
15. Optimisation SQL Expert
16. AWS Avancé
17. DATABRICKS Confirmé
18. Apache Airflow Confirmé
19. Anglais Courant