Oussama ABBAS

– Conception et développement de nouvelles pipelines de données en utilisant NiFi et PySpark, visant à maximiser l'efficacité et la performance dans le traitement des volumes importants de données. – Collaboration étroite avec les équipes métiers et data dans un environnement Agile, pour optimiser le développement et accélérer la livraison de solutions data innovantes. – Développement de pipelines de données scalables en utilisant conjointement, Apache NiFi et Kafka et Google Pub/Sub pour une intégration et une analyse efficace des flux de données en temps réel. – Mise en œuvre de solutions analytiques avancées avec BigQuery, Dataflow et Compute Engine, exploitant des données structurées et non structurées pour des insights décisionnels approfondis. – Automatisation des processus de traitement de données avec Apache NiFi, Airflow, permettant une gestion plus agile et réactive des pipelines de données. – Optimisation continue des configurations et des performances des solutions de streaming avec NiFi et Kafka, garantissant une haute disponibilité et un traitement de données optimal. • Création de documentation technique détaillée et manuels de référence pour guider les équipes dans l'optimisation des traitements et la gestion des performances. • Formation et encadrement des développeurs, renforçant les compétences techniques des équipes sur les technologies de streaming et de traitement de données.

– Conception et développement des data flows à travers EFM ( Edge Flow Management) et des agents MiNiFi pour récupérer les données depuis SQL Server installé sur des équipements IOT et les transférer vers Kafka et NiFi en assurant le monitoring et le fonctionnement en temps réel

– Mise en place des clusters Apache NiFi de productions sur Kubernetes – Migration et Optimisation des flux NiFi – Optimisation des configurations des clusters NiFi – Optimisation des flux NiFi

– Développement, Migration et Optimisation des flux NiFi existants sur CDF. Les flux concernent la récupération du trafic réseau UDP/TCP pour détecter les vulnérabilités Cybersécurité – Développement, Migration et Optimisation des jobs Spark (PySpark).

– Étude, simulation et résolution du problématique de blocage du cluster Confluent Kafka à grosse volumétrie de données. – Optimisation de la configuration des clusters Kafka

– Analyse et développement des solutions d'entrepôt de données sur Hadoop Cloudera, en définissant une architecture adaptée aux besoins. – Conception et Développement des parties d'ingestion et chargement des data streams sur HBase, en utilisant Apache NiFi. – Conception d'une solution de transformation des données courbes de charge en utilisant des pipelines Apache NiFi. – Modélisation des données, développement des ETL/ELT et entrepôts de données – Conception des flux de données ETL/ELT entre les datasets, SGBDs et API. – Création d'une solution de supervision des processus d'ingestion, en intégrant Kafka et NiFi pour surveiller et gérer les flux de données. – Transformation des données avec Spark pour présentation sur API – Résolution des problèmes d'alimentation des données sur les flux existants, en optimisant les flux de données sur NiFi – Création et exploitation de tables externes/internes Hive avec HiveQL. – Développement, Optimisation et monitoring des jobs Spark (PySpark, Scala) – Création de requêtes d'analyse sur Hive pour répondre aux besoins métiers, en assurant une intégration fluide avec les différentes chaînes de valeur. – Optimisation des performances des Jobs d'ingestion de données (Spark), en surveillant et en améliorant les configurations. – Collaboration avec le métier pour la définition des besoins – Conception et développement des Jobs de traitements de données avec Spark Databricks

– Conception et développement de la solution Telecom Network Management : mise en œuvre avec Apache NiFi, Kafka, HDFS, Hive pour optimiser la gestion et l'analyse des réseaux. – Développement d'une solution de gestion des triggers en temps réel en utilisant Apache Kafka et NiFi, améliorant la réactivité des systèmes de gestion de télécommunications. – Intégration et gestion des datasets provenant de multiples sources sur Hadoop, renforçant la centralisation et l'accessibilité des données. – Développement de solutions pour l'entrepôt de données et modélisation de données avancée, supportant des initiatives stratégiques de data warehousing. – Utilisation des données et modèles de data-warehouse pour la création et l'amélioration de produits data, implémentant des cas d'usage business critiques. – Conception et mise en place du projet de comptabilité analytique avec Informatica et Teradata SQL, intégrant des données complexes pour une analyse financière précise. – Conception et mise en œuvre de flux de données ETL/ELT end-to-end avec Apache NiFi, assurant une intégration fluide et efficace des données. – Développement et optimisation de flux de données ETL/ELT pour divers datasets et SGBDs, augmentant la précision et l'efficacité des traitements de données. – Optimisation des performances des applications Spark sur Databricks, réduisant les temps de réponse et augmentant l'efficacité opérationnelle. – Développement de composants pour l'ingestion et le chargement de data streams sur Apache Kafka, facilitant la gestion en temps réel des flux de données. – Gestion de projets de datawarehouse et d'analyse de données à grande échelle, dirigeant des équipes vers des objectifs stratégiques et des résultats mesurables. – Analyse de grands volumes de données et extraction d'insights, guidant les décisions d'affaires grâce à des analyses approfondies.

– Créer des rapports et des dashboards Business Intelligence sur Microstrategy ( Web, Desktop) Tableau et Metabase,– Développer des bases de données et des workflows ETL/ELT – Développer les transformations des données depuis leur état brut vers des cubes pour reporter et analyser les performances du réseau Telecom – Générer et fusionner des rapports depuis des sources multiples – Automatisation de la vérification de l'intégrité des données et de la normalisation des données – Développement des scripts Java, BAT et Shell pour le batch processing Administration de multiple SGBDs tel que MSSQL et MySQL – Répondre aux demandes d'analyse ad-hoc et faciliter les acquisitions de données pour soutenir les projets internes, les projets spéciaux et les investigations – Expliquer clairement les résultats des données et discuter de la manière dont ils peuvent être utilisés pour soutenir les objectifs des projets – Dépannage et test du système de monitoring Télécom d'Astellia – Conception et développement des environnements de reporting et des sources de données – Développement des scripts d'agrégation, de calcul et d'analyse des indicateurs et des clés de performance Telecom – Gérer et maîtriser les données, y compris la création, les mises à jour et la suppression • Administration des utilisateurs et des rôles des utilisateurs métier ou du secteur IT/Telecom • Dépannage du réseau TCP/IP – Suivie des tickets avec le fournisseur Astellia

– Développement d'un outil de configuration de l'équipement MSAN en utilisant Java – Gestion du projet MSAN dans une région – Assurer la mise en service à toutes les étapes (Hardware et Software et Networking) • Diagnostiquer et résoudre les problèmes complexes des clients pour la mise en œuvre, l'ajout, la maintenance et le support des applications voix, données, VoIP et CTI. – Planification du calendrier de déploiement en fonction de la disponibilité des ressources Métier, matériel et humaine