Hugo Dos

- Joined the Data Platform team to develop and maintain tools for data ingestion and management. - Developed several tools to facilitate data ingestion within the Sodexo Platform: - Data Asset Builder: Tool for ingesting data from multiple sources into the data lake. - DBT Cookie Cutter: Template to help data project teams enrich their data in the data lake. - Consumer API: API designed to standardize data consumption patterns for clients. - The platform uses Azure Data Lake as the storage layer and Dremio as the semantic layer, following a data lakehouse architecture. Processing is handled via Azure Databricks and Azure Data Factory. - Supported project integration into the data platform. - Contributed to user story definition and performed code reviews. - Authored technical documentation. - Coordinated with Global Architecture and Security teams by submitting Technical Architecture Documents (TADs).

Migration of a risk metric calculators : - Develop a custom scheduler in Java SpringBoot - Calculate risk metrics - CI/CD chain with Jenkins/Ansible

Member of Renault Datalake Team as Onepoint consultant, my work is divided on two parts : - Support Service Request (SRE) => Helping new and current Renault projects who use the datalake (ex : access request, documentations, migration of the datalake environnements, etc .) => Resolve datalake platform incidents. On my side, it was especially when it was related to Hive, Spark, Oozie, Hue etc. => Monitoring HDP resources and consumptions - Design and Build => Installation of external components for HDP such as new notebooks like JupyterHub => Testing tools or frameworks for future production : Flink, Apache Eagle, Python skein, PySparkling , Kafka etc. Environnement : HDP (2.5 then Kerberised 2.6) + Elasticsearch

Dans ce stage, je participe à la conception d'un moteur de recommandation filtrage collaboratif à partir des produits visités par des internautes non identifiés dans un site de vente. Pour cela, j'utilise différents algorithmes de machine learning (ex : ALS) disponible sous Scala Spark MLlib pour proposer une liste de produits personnalisée pour chaque internaute.

Durant ce stage, j'ai effectué différents projets et assisté sur différentes tâches en relation de l'administration système. Pour les projets que j'ai effectué, il y a la migrations de serveurs auxquels je devais m'occuper de changer des serveurs "anciens"​ en des "nouveaux"​ qui auraient un système d'exploitation plus moderne mais qui conserverait les mêmes paramètres que le précédent. J'ai par ailleurs assisté mon équipe à la maintenance et au bon fonctionnement des serveurs de l'entreprise.