yassine jouini

Je travaille au sein de l'équipe dans le département réseaux SFR pour créer des nouveaux pipelines, maintenir les fluxs de données déjà existants et assurer une plateforme stable, fiable, sécurisé, robuste, hautement disponible et multi tenant - Migration des projets de Cloudera vers AWS et faire une étude de comparaison de performance et de cout - Monter en compétence l'équipe dans l'utilisation des services AWS et Cloudera - Monter en compétence l'équipe dans les bonnes pratiques dans spark (streaming et batch) - Études des architectures, solutions et produits Big Data : - Migration version Cloudera de 5.12.1 vers 5.16.2 - Etude d'impact sur une migration CDH vers CDP - Migration version Cloudera de 5.16.2 vers CDP 7.1.7 - Sécurisation cluster kafka (authentification and authorization) - Migration des jobs spark 1.6 vers spark 2.4 - Mettre en place spark3 et étude d'impact sur les anciens jobs en spark 2 - Agrandir le cluster de 10 Noeud vers 20 noeud - Agrandir le cluster Kafka de 3 brokers vers 6 brokers et rééquilibrer les topics existants - Mettre en place un cluster Nifi sécurisé - Création des processors Nifi personnalisés - Migration des projets existants (Flume, Script Shell, Python) vers des implementation avec Nifi - Mettre en place un cluster (Pre Prod) CLoudera Sécurisé (Kerberos) From Scratch - migration les données clients de cluster Kafka vers la plateforme cloutera en temps réel (600k messages par secondes) - Calcul des KPIs de performance des clients - Détecter les caractéristiques qui génèrent le plus de désynchronisation de connexion par rapport à différents critére (region ,matériel ..) - Création d'un dashbord pour suivre les KPIs des clients avec tableau - Administration des clusters et support niveau 3 : CDH5,CDP, Hadoop, HDFS, HIVE, SPARK2, OOZIE, Flume,Zeppelin,Nifi,Kafka - Développement d'outils et scripts d'automation pour le déploiement automatique des opérations standard : Ansible

Je travaille au sein de l'équipe d'architecture Big data au "competency Center" à AXA Technologie pour délivrer une plateforme stable, fiable, sécurisé, robuste, hautement disponible et multi tenant pour l'ensemble des données d'AXA Monde (EUROPE, ASIE, Amérique du nord). Mais aussi pour fournir aux clients internes de nouvelles fonctionnalités et solutions innovatrices. - Études des architectures, solutions et produits Big Data ( cloudera navigator, intégration Kafka LDAP, intégration Kafka Navigator ...) - Administration des clusters et support niveau 3 : CDH5, Hadoop, HDFS, HIVE, SPARK, OOZIE, Flume… - Développement et intégration d'outils big datèrent avec les outils du SI plus global (RDMS, systems de logging, serveurs FTP, annuaire LDAP, Kerberos ...) : CDH5, Kerberos, Open Ldap, Centos, Postgresql ... - Développement d'outils et scripts d'automation pour le déploiement automatique des opérations standard : Ansible, python ... - Gestion des projets -Travail sur une plate-forme sécurisé et industriel mise en production: Kerberos, LDAP, Certifications ...

Skills: Pipeline Construction

I worked as a big data engineer involved in the conception and the development of storage infrastructures and the implementation of data processing algorithms --- Keywords: Hadoop, HDFS, Log analysis (Logstash,Elasticsearch,Kibana) , spark,storm, Data Mining, R, prédiction