En cliquant sur "Accepter", vous acceptez le stockage de cookies sur votre appareil pour améliorer la navigation sur le site, analyser l'utilisation du site et contribuer à nos efforts de marketing. Consultez notre politique de confidentialité pour plus d'informations.
Flèche permettant d'actionner le carrousel
Retour

Data Engineer (H/F)

Lieu : 
Paris
Type : 
Remote
Salaire : 
TJM : 
Data
Data Engineer
Spark
Python
Hadoop

CLIENT

Dans un contexte de transformation de l'entreprise, et pour renforcer l'équipe, nous recherchons un pour l’un de nos clients, un DATA ENGINEER.

Projet  : Uniformiser les modèles de données et migrer l’infrastructure vers une architecture Hadoop

MISSIONS

Les livrables attendus seront les suivants :
▶︎ Jobs de lecture de transactions depuis un flux MAPR Streams
▶︎ Jobs d’enrichissement des transactions
▶︎ Stockage des transactions traitées dans le cluster MAPR
▶︎ Indexation des transactions dans un cluster ElasticSearch

Tous les jobs et applications développés pour ce projet respecteront les contraintes établies par les équipes opérationnelles :

▶︎ Packaging RPM
▶︎ Industrialisation livrée sous Puppet
▶︎ Monitoring applicatif
▶︎ Procédure de healthcheck
▶︎ Schéma d’architecture

La documentation sera fournie dans un espace Confluence dédié au projet. Elle devra comprendre :

▶︎ Schéma d’architecture
▶︎ Description des flux de données

COMPÉTENCES

▶︎ Maîtrise des cluster Hadoop et si en possible de la solution MAPR
▶︎ Maîtrise de Spark / Spark streaming
▶︎ Expertise en Scala, Java et si possible scripting en Python/Perl/Bash

La méthodologie utilisée est Agile/Scrum et les ressources affectées doivent être complètement familiarisées avec cette méthodologie.

▶︎ Anglais opérationnel (contexte anglophone).

STACK TECHNIQUE

▶︎ Environnement Logiciel : Base de données Oracle, cluster MAPR (Hadoop)
▶︎ Environnement Système existant : Linux Redhat 7, Java, Scala, Spark/Spark Streaming

PROCESS

▶︎ 1 visio avec VP of Engineering

▶︎ 1 entretien avec CTO et le lead
▶︎ Rencontre de l’équipe
▶︎ Final avec le CEO

MODALITÉS

▶︎ Type de contrat : Freelance
▶︎ Poste en Freelance à pourvoir immédiatement
▶︎ Télétravail total possible
▶︎ Localisation: Paris, France

Postulez directement au poste de

Data Engineer (H/F)

Nous vous recontactons sous 2 heures !
Format PDF - Taille max : 10MO
Téléchargement en cours
fileuploaded.jpg
Le téléchargement a échoué. La taille maximale des fichiers est de 10 Mo.
Merci !
Nous avons bien reçu votre message et nous vous répondrons dans les plus brefs délais !
Oops! Une erreur s'est produite lors de l'envoi du formulaire.
N'hésitez pas à nous appeler directement !
No items found.