WorldWide People

Data Eng / Data Analyste - Apache Hadoop (Lille)
Objectifs et livrables
Dans une équipe agile pluridisciplinaire, composée de data analystes, data ingénieurs et data scientists, sont réalisées les tâches suivantes :
<ul>
<li>Ingestion des données</li>
<li>Analyses fonctionnelles</li>
<li>Restitutions</li>
<li>Ordonnancement des traitements</li>
</ul>
Tâches :
<ul>
<li>Manipuler les fichiers sous UNIX et HADOOP</li>
<li>Développer l&#39;ingestion de données via des scripts SQL</li>
<li>Ordonnancer les traitements</li>
<li>Suivre le run et gérer les erreurs</li>
<li>Optimiser les traitements SQL</li>
<li>Industrialiser les solutions d&#39;imports et d&#39;exports de données</li>
<li>Industrialiser les traitements des Data Scientists</li>
<li>Réaliser des imports et exports de données aux formats non standards</li>
<li>Développer des pipelines d&#39;ingestions et d&#39;export en streaming</li>
<li>Participer au collectif agile</li>
</ul>
Compétences demandées :
<ul>
<li>Cloudera Impala (Avancé)</li>
<li>SQL (Confirmé)</li>
<li>Apache Hive (Avancé)</li>
<li>HADOOP (Avancé)</li>
<li>SAS VA (Avancé)</li>
<li>GIT (Avancé)</li>
</ul>
Profil recherché
Poste de Data Eng / Data Analyste Apache Hadoop dans le secteur public du nord de Lille.
Environnement de travail
Secteur public du nord de Lille, environnement Big Data.

217672/data Eng / data Analyste Apache Hadoop secteur publique du nord LILLE

217672/data Eng / data Analyste Apache Hadoop secteur publique du nord LILLE

Cette offre n’est plus disponible

Freelancers

Entreprises

À propos