Software engineer / Data développeur F/H - Stage 6 mois

Description de l'offre

'- De développer les projets Big Data demandés par le métier, et notamment :

a. passer de la donnée brute à de la donnée propre, exposée sous forme de tables requetables dans le datalake (inférer les schémas de données, nettoyer et normaliser les données, publier les données)


b. consolider ces données au fur et à mesure de leur alimentation récurrente dans le data lake


c. les exploiter pour atteindre la finalité business (exposition de business view, réintégration des résultats dans le SI, service de scoring, …)

- De travailler à la création du socle technique Big Data (librairies de fonctions, features communément utilisées avec les data scientists…) et contribuer à industrialiser le cycle de développement de l'équipe Engineering

- D'appliquer dans la durée les pratiques & processus qualité du cycle de développement de l'équipe Engineering (documents, tests unitaires / intégration / fonctionnels, commentaires, versionning, code review, pair programming…)

Profil recherché

Qualifications :

• Formation scientifique (école d'ingénieur, école d'informatique)

• Bon développeur sur un ou plusieurs langages (Java, python, .NET, ..)

• Première expérience ou bonnes connaissances en développement Big Data (pySpark + Hadoop de préférence, mais aussi Hive, Impala, Oozie, Kafka, Spark Streaming, Flume....)

• Habitudes des cycles de développements & outils associés (intégration & déploiement continu avec Jenkins, Sonar, Nexus, NUnit, Git...)

• Ces connaissances supplémentaires seraient un plus : environnement Cloudera, outils de data viz, librairies de Machine Learning, bases de données NoSQL (MongoDB, Hbase, ElasticSearch, Solr…), création d'API

• Capacité à travailler en autonomie et à solliciter le reste de l'équipe de manière proactive, faire preuve d'une grande curiosité et de capacité d'innovation.

• Anglais préférable