MAHAM Nouh

Au sein du groupe Laposte dans le département BGPN, je suis amené à travailler sur l'exploitabilité sur les envs Big Data, mes missions consistent à : – Builder les nouveaux environnements Big Data (import-data, hdfs-watcher, CDE) – Industrialisation des DAGs Airflow (Airflow sur Openshift) – Remise en condition opérationnel des pipelines d'ingestion, de traitement et de privacy (Spark & Airflow). – Résolution de bugs et incidents sur la stack technique: Docker, Cloudera, hue, nginx, hdfs, cluster spark, airflow, jenkins, machines linux avec des scripts bash/python et ansible & kafka. – Déploiement du Big data sur les envs Openshift – Scaling de systèmes distribués : Hadoop HDFS/ Cloudera petabyte scale Data lake – Accompagnement sur la migration des usages clients – Création et affinage des sondes Centreon (supervision, alerting) – Optimisation & Rebalancing Kafka avec Cruise Control – Suivi des backlogs via Jira et ServiceNow. – Gestion d'incident n2, n3 – Respect des SLA et optimisation du downtime – Suivi des process ITIL (CEXP, Problème, Changement, Release, etc) – Astreintes (astreintes niveau 3 Prod pour la plateforme OneDLG et PvC) Environnement technique (Hadoop, D. Cloudera, C. Manager & Ranger, KnoxSSO, IDM, LdapProxy, CDP Private Cloud (PVC), Shell, Python, Ansible, Airflow, AWX, Jenkins, Git, Gitlab, Openshift, Docker, Prometheus, Kafka, Spark).

Mission à la banque de France au sein de la DDSA, je suis amené à intervenir dans un environnement Data Science. Les missions que j'ai effectuées : – Accréditations VMs pour les labos (Dev, Recette, Prod) – Lutte contre la fraude monétaire au sein de la banque de France – Suivi Labo Env (dev, recette, production) – Maintenance et suivi SecureDB (outil développé en interne BDF) – Gestion d'outil de continuous delivery Git – Gestion d'incident sur Rstudio & JupyterHub - Support N2, N3 – Participation aux travaux de mis en place d'un outil de visualisation (Grafana, Prometheus) – Interfaçage avec l'équipe DataLake – J'ai rejoint l'équipe N3 SODATA, Je suis amené à travailler sur support ainsi que la conception. – Gestion d'incident (Recette, Qualif) – Création et administration de projet big data – Mise en place du pipeline data (ingestion, prepa, expo) – Rédaction de spécification fonctionnelle et technique – Support N3 cloudera CDP – Accompagnements clients dans un point de vue technique – Qualification des composants Big Data (Zeppelin, HUE, Airflow, kafka, Apache Storm) – Participation aux réunions d'équipe Support N3, Architecture – Suivi projet Jura Datalake – Participation à de nombreuses réunions avec les différents acteurs (architectes, experts techniques réseau / AD / Virtu / Unix / Sécurité et habilitations...) – Environnement technique (SQL, RStudio, JupyterHub, Grafana, Prometheus, DataLake, Jira, Linux RedHall, Shell, Python, R, JupyterLab, Cloudera CDP, Atlas, Spark, etc...)

Mission à la BPCE-IT pour une durée de 3 ans, j'amenais à participer à divers projets Big data en terme d'architecture et conception, mes taches ci-dessous : – Installation de clusters Hadoop – Monitoring de la plateforme AMBARI (HortonWorks), Grafana – Déploiement et Installation du cluster HDP via (ansible ou ambari) – Maintien en condition opérationnelle des clusters de production et hors production – Mise en place de la haute disponibilité – Participation aux travaux de mise en place de la sécurité (kerberos, ranger, knox, SSL Certificats Keystore) sur des clusters de production et Hprod – Participation au montée de version Stack HDP (2.5 à 3) – Test de performance sur LLAP Hive sur le HDP Stack 2.6.5 – Sécuriser les clusters HDP en mode SSL, kerberos, knox – Installation des instances grafana vis à vis aux demandes clients bpce-it – Dépannage, diagnostic, réglage, résolution des problèmes hadoop – Maintien Kerberos avec AD (Active Directory) et LDAP – Intégrer OpenLDAP avec Ambari – Intégrer LDAP avec les services comme Ranger, Knox, Atlas – Apporter des correctifs aux incidents récurrents zeppelin (stack hdp 2.6) – Utilisant Ansible pour pousser les changements de configuration sur le cluster. – Participation aux travaux de mise en place de tableaux de bord pour la supervision et le capacity planning, ainsi que la remontée d'alertes – Gestion d'Incident Support Niveau 3 (Cluster, Ldap, Services Hadoop, etc...). – Travaillé dans un environnement 24x7 pour le support de production – Participation aux travaux de migration HDP 3.1 to CDP 7.0 – Interface avec Cloudera Support – Participation à de nombreuses réunions avec les différents acteurs

Intervenir en mission à la BNP(BP2I) dans une équipe de consultant Archi Hadoop Delivery & Build Big Data, je suis mandaté à Installer de cluster hadoop et monitoring la plateforme AMBARI (HortonWorks). Mes missions consistent à : – Montée de version du stack HDP & Ambari – Installation et administration du cluster Hadoop HDP via Ansible – Suivi de clusters à l'aide ambari et YARN – Planification des jobs et suivi de l'état des jobs YARN – Monitoring cluster hadoop, surveillance des alertes et des notifications – Cluster maintenance, commissioning & decommissioning data nodes. – Resizing les data nodes et edge nodes – Mise en place et pilotage de la supervision du Cluster Hortonworks avec Nagios et Ambari Metrics – La sécurité des clusters Hadoop utilisant Kerberos, Knox. – Une bonne maîtrise des composants hadoop, HDFS, hive, spark, zoo etc. – Bonne expérience de travail dans le cadre Eco-system Hadoop – Planification de tous les jobs hadoop / hive / sqoop / Hbase à l'aide d'Oozie. – Loading log data directly into HDFS en utilisant Flume. – Importing and exporting data into HDFS en utilisant Sqoop. – Creation de scripting shell pour ajouter ou supprimer les users dans le cluster. – Intégrer LDAP avec Ambari – Intégrer LDAP avec les services comme Ranger, Knox, Atlas – Installation & administration les serveurs d'analyse (RStudio, Jupyter) – Élaborer des scripts shell afin de gérer le stockage sur HDFS – Responsable de la mise en service et de la mise hors service des nodes du cluster – Gérer et consulter les FS, les fichiers des logs Hadoop – Déploiement de mises à mises, mises à jour et correctifs – Monitoring systèmes, services, configuration, backup, et gestion de sauvegarde. – Support 2 & 3 (Run) – Gestion d'outil de continuous delivery Jenkins, Git et Jira – Participation à de nombreuses réunions avec les différents acteurs (architectes, experts techniques réseau / AD / Virtu / Unix / Sécurité et habilitations...) – Environnement technique (Hadoop, D. Hortonworks, Ambari & Ranger, LDAP, Linux RedHall, Shell, Plateforme(Docker, Virtualbox), on-premise, Ansible, Kerberos).

Intervention en mission chez EDF dans une équipe de consultant Archi Hadoop & Data engineer, je suis amené à traiter les données des clients grands comptes sur une plateforme BIG DATA (HortonWorks). Mes missions consistent à : – Installation et déploiement de clusters Hadoop – Administration d'Ambari & Ranger – Participation à l'automatisation de flux de donnée en mode streaming avec une architecture KAPPA – API Client -> KAFKA -> Spark Streaming -> HDFS – Collecter, traiter et stocker les données en temps réel (Spark Streaming, Kafka, Hbase)