Data Engineer Python / Azure Sénior

Contexte

La Direction des Systèmes d’Information recrute un Data Engineer pour concevoir, développer et maintenir les architectures Data nécessaires à l’exploitation des données.

Missions

• Mener les projets d’intégration (temps réel) et data (big data & insights)

• Comprendre, analyser et proposer des solutions techniques répondant aux besoins des divers acteurs de la donnée (spécialistes métier, architecte, data analystes et scientists)

• Apporter un éclairage technique sur les architectures Cloud, dialoguer avec les fournisseurs de solutions et les consultants techniques

• Dans une logique de mise en production, créer et déployer des pipelines de données robustes pour les data scientists et data analysts (collecte, stockage, transformation et exploitation)

• Assurer une bonne qualité des données pour les projets Machine Learning (préparation, complétude, épuration, enrichissement) dans le but d’optimiser les performances des modèles

• Améliorer les processus internes : localisation et traçabilité de la donnée, standardisation des flux et des scripts de traitement des données, documentation

• Collaborer avec les équipes basées à l'étranger (Anglais) pour faciliter le Data-Sharing, échanger sur les best-practices et les moyens d’optimiser les architectures

• Contribuer à l’amélioration de la gouvernance sur la protection et la confidentialité des données

• Toute activité en dehors de celles énumérées au titre des fonctions principales pourra être confiée au collaborateur dans le cadre de son activité en fonction de son évolution au sein du service et des besoins de l’entreprise

Environnement technique

• PowerShell

• Azure Functions

• Azure

• Data Factory

• Event Grid

• Azure SQL

• PowerBI

• Azure DevOps (YAML, Bicep)

• Langages SQL, Python, PowerShell

• Utilisation des API (REST, SOA)

• Gestion de projet et connaissance de conception d'architecture

• Esprit d’initiative, capacité d’analyse, capacité d’adaptation, rigueur, autonomie, travail en équipe

1. Formation ingénieure ou universitaire de niveau Bac+5 à dominante informatique et mathématiques

2. Expérience de 5 ans minimum sur un poste similaire

3. Bon niveau sur Python en orienté objet et Data

4. Maîtrise des services Azure, en particulier Data Factory, Azure Functions, Event Grid et Azure SQL

5. Connaissance d’Azure DevOps pour le déploiement (YAML, Bicep), la documentation et la gestion de projets

6. Compétences en langage SQL et en programmation (Python et PowerShell)

7. Aisance dans l’utilisation des API (REST, SOA)

8. Maîtrise de l’anglais obligatoire