Data Engineer AWS

Contexte

La mission proposée s’inscrit dans le cadre du programme pour la Direction d’une grande banque d’investissement.

• De permettre aux Senior Bankers en relation avec les clients de la Banque de détecter des opportunités de nouveaux business,

• D’améliorer la connaissance de leurs clients via des données spécialisées,

• De renforcer la relation commerciale,

• D’être plus force sur leurs activité administrative (Compte rendu automatisé, organisation de meeting automatisé, …)

• Et d’améliorer l’efficience d’interaction avec l’outil CRM de la Banque.

Ce programme est constitué de plusieurs streams :

• Mise en œuvre de solutions à base d’IA Générative

• Mise en œuvre d’une moderne Data stack permettant d’alimenter les solutions d’IA de manière efficace et pertinente.

Il s’agira de l’améliorer avec des solutions AWS de gestion de pipeline de données.

La mission portera spécifiquement sur ce dernier stream : Data platform (Environnement cloud AWS).
La maîtrise de l'anglais est obligatoire.

Les données à traiter concernent potentiellement l’ensemble des données de la Banque et de fournisseurs externes de données, par exemple Standard & Poor.

Missions

• Participer à la définition de l’architecture de la data plateforme et du Lakehouse

• Réaliser les développements de solutions de data management et l'implémentation des pipelines de données

• Réaliser l’intégration des solutions de data management de AWS

• Participer à l’implémentation d’un Data Lab

• Mettre en place la CI/CD pour le data management

• Étude des demandes fonctionnelles à traduire en solution IT

• Mettre en place les conditions de maintenabilité et de sécurité

• Participer aux opérations de mise en production

• Participer au support de production en cas d’incident majeur

Outils & Environnement

• Environnement cloud AWS

• Développement logiciel avec Pyspark job Glue et Java pour les API

• Utilisation de Github/Copilot

1. Maîtrise de l'anglais obligatoire
2. Forte expérience en Data management
3. Expérience en développement logiciel, notamment avec Pyspark job Glue et Java pour les API
4. Utilisation de Github/Copilot