Data Engineer (H/F)
CDI Lille (Nord) Études / Statistiques / Data
Description de l'offre
Référence:
DAEREG381CSHDE
Expérience
Plus de 2 ans d'expérience
Type de contrat
· CDI
Emplacement
· Hauts-de-France
Villeneuve d'Ascq
Métier
· Informatique & Télécom
Mission
La practice « Data & Analytics » recherche un(e) data Engineer H/F pour intervenir sur les projets Big Data et Data Science de l'entreprise.
En tant que Data Engineer, vous contribuerez au développement de notre plateforme Big Data et rejoindrez une équipe composée d'experts de la data (data architect, data scientist, data analyst, data engineer). Cette plateforme en constante évolution utilise les technologies Hadoop, Cloudera, Spark, Scala, Python et comporte des briques de Machine Learning, de Data Viz.
Vous aurez pour principales responsabilités de :
· Analyser les besoins avec les équipes métiers et data analystes
· Concevoir et développer les traitements de données et réaliser les tests de validation
· Structurer le stockage des données
· Maintenir et développer l'alimentation des données du datalake et des datamarts associés
· Garantir la qualité des traitements des données et leur intégrité
· Réaliser les ordonnancements des traitements
· Développer et industrialiser les flux de traitement/d'enrichissement de données
· Assurer l'interface avec les équipes métier de l'entreprise
· Industrialiser les traitements data science au sein du datalake
· Assurer la mise en oeuvre, le suivi, l'exploitation et la mise à jour des différents outils déployés
· Maintenir la plateforme Big Data en condition opérationnelle et garantir sa disponibilité et sa performance
Profil recherché
Profil
Connaissances requises :
· Développement (Java, Python, Scala, R)
· Technologies Big Data (Hadoop, Yarn, Pig, Hive, Sqoop, Flume, Impala, Kafka, Spark, Splunk, Elastic, ?)
· Traitement et manipulation de données (ETL Stambia, talend, ?)
· Base de données NoSQL (HBase, MongoDB, Cassandra, Neo4J)
· Architectures Big Data(Hortonworks, Cloudera, Map Reduce)
· Expérience avérée dans la réalisation de projets dans le domaine du Big Data
De formation supérieure, BAC +5 formation informatique ou ingénieur, vous justifiez d'une expérience d'au moins de deux ans en analyse et traitement de données dans des environnements Big Data.
Vous faites preuve de rigueur et d'esprit d'analyse, vous êtes réactif et avez le sens de l'écoute et du travail d'équipe.
Vous souhaitez progresser, relever de nouveaux défis technologiques et fonctionnels, cultiver votre esprit d'ouverture, votre expertise et mettre en valeur ou développer vos certifications.
Le poste est à pourvoir immédiatement.