Data Engineer Databricks

Vos missions :

• Conception et développement de solutions sur Microsoft Azure (Azure Data Factory, SQL Database, Synapse) pour des projets à forte valeur ajoutée.

• Developpements Azure Databricks: Unity Catalog, Lakehouse, Lakeflow, Databricks Apps,

• Participer à l’industrialisation de la donnée via des processus ETL/ELT en PySpark, SparkSQL, Python, SQL, Scala, DBT, avec la mise en œuvre de CI/CD (github, devops, Databricks Bundles), de l’orchestration, du data management, de l’architecture et de la sécurité.

• Travailler au sein d’équipes pluridisciplinaires : chefs de projet, architectes, ingénieurs, data analystes… dans un esprit de collaboration et de partage.

• Participer au cadrage de projets : recueil des besoins, modélisation des données, définition de la solution technique, et accompagnement à la maîtrise d’ouvrage.

• Contribuer au management de projets et aux choix d’orientations technologiques des clients.

• Participer à la conception d’offres innovantes autour de l’UX BI, BI Self-service, Data Engineering, Data Management… et à leur promotion.

• Rédiger et soutenir des propositions sur mesure répondant aux besoins spécifiques de nos clients.

• Assurer une formation continue et le partage de connaissances avec vos collègues, notamment via notre organisme de formation interne.- Formation :

  • Bac +5 en Ingénierie, Data engineer, ML, Mathématiques, Statistiques ou Informatique.

• Compétences techniques :

  • Maîtrise des technologies Microsoft Azure, Azure Databricks.
  • Expérience avec les langages SQL et Python, ainsi que les frameworks de traitement de données comme PySpark et SparkSQL.
  • Maîtrise Microsoft Azure : Administration, Azure Data Factory, Azure DevOps, CI/CD, Microsoft Fabric,
  • Maitrise de Databricks : Administration, gestion des Catalogues, ETL
  • Compétences en gestion de projets data, architecture et data management

• Qualités humaines :

  • Esprit d’équipe et envie d’apprendre et d’évoluer dans un environnement collaboratif.
  • Excellente capacité à communiquer et à partager vos connaissances.
  • Rigueur, organisation, proactivité et capacité d’analyse.