Data Engineer Python et/ou Scala

Contexte

Au sein d’une entité spécialisée en solutions digitales et innovation, sous la responsabilité directe du Manager et d’un chef de projet, nous recherchons un data engineer pour assurer le développement d’applications en Python et StreamLit, avec un intérêt pour l’optimisation / recherche opérationnelle.

Missions

• Participer au développement d’un ou plusieurs projets DATA pour le compte de clients internes.

• Intégrer l’équipe Data Engineer actuelle (Spark/Scala/Python).

• Participer, animer et garantir la qualité du développement d’applications Data.

• Garantir la connaissance, l’application et le développement des standards et bonnes pratiques durant la phase de construction (build).

• Intervenir en support Niveau 3 en cas d’incident durant la phase d’exploitation (run).

• S’approprier le périmètre fonctionnel du projet et les exigences métiers.

• Être moteur et force de proposition lors des ateliers de conception, analyser les contraintes fonctionnelles et besoins pour fournir des réponses techniques adaptées.

• Participer aux instances Agile (sprint planning, estimations, rétrospectives).

• Participer aux ateliers d’affinage des spécifications.

• Décliner le besoin fonctionnel sous forme de composants techniques.

• Développer l’application sur la base d’User Stories / tickets Jira.

• Écrire les tests automatisés.

• Réaliser l’assistance technique lors de la recette.

• Mettre en place des attendus d’exploitabilité (robustesse, automatisation, supervision, documentation et consignes).

• Réaliser le support Niveau 3 : support à l’équipe d’exploitation en cas d’incident complexe, mise en place de correctifs, relance des traitements.

• Contribuer activement à l’amélioration continue des process et outils de l’équipe.

• Accompagner les Data Engineers en formation dans leur montée en compétence dans le cadre des projets.

• Encourager le partage d’informations techniques et projets, par exemple lors de présentations en réunion.

• Motiver l’équipe vis-à-vis des objectifs, orienté résultats.

Résultats attendus et livrables

• Spécifications détaillées.

• Code source.

• Tests unitaires intégrés au code source.

• Chaîne d’automatisation (CI/CD) sous forme de pipelines Jenkins.

• Moniteurs et tableaux de bord Datadog.

• Documentation technique.

• Supports d’avancement (tickets Jira par exemple).

Compétences requises

Requises :

• Méthodologie Scrum.

• Python.

• Streamlit.

• Typescript / Javascript.

• SQL / noSQL.

• Azure (Datalake, Synapse).

• Jenkins, Git, Ansible.

Optionnelles appréciées :

• Recherche opérationnelle.

• Scala.

• Spark.

• Databricks.

Qualités requises :

• Aisance relationnelle.

• Esprit d’équipe et d’adaptabilité.

• Esprit de synthèse.

• Rigueur et esprit d’analyse.

• Autonomie.

• Force de proposition.

• Sens des priorités et capacité à gérer les délais.

• Travail en mode multi-projets.

1. Maîtrise de la méthodologie Scrum
2. Compétences en Python
3. Expérience avec Streamlit
4. Connaissance de Typescript / Javascript
5. Maîtrise des bases de données SQL/noSQL
6. Expérience avec Azure (Datalake, Synapse)
7. Connaissance des outils Jenkins, Git, Ansible
8. Compétences optionnelles appréciées : Recherche opérationnelle, Scala, Sparks, Databricks
9. Aisance relationnelle
10. Esprit d’équipe et d’adaptabilité
11. Esprit de synthèse
12. Rigueur et esprit d’analyse
13. Autonomie
14. Force de proposition
15. Sens des priorités et capacité à gérer les délais
16. Capacité à travailler en mode multi-projets