STAGE - Data Ingénieur / DataOps-industrialisation du process de versioning des données H/F

Description de l'offre

Détail de l'offre

Informations générales

Entité

Rejoignez une entreprise au cœur des activités du groupe Crédit Agricole, de ses évolutions et de sa transformation.
Holding et société cotée du Groupe, Crédit Agricole S.A assure la coordination, la cohérence et les synergies entre les entités pour porter les ambitions du Projet du Groupe.

Les missions confiées à nos collaborateurs offrent une vision transversale des enjeux économiques et stratégiques du Groupe.

Référence

2022-74367  

Date de parution

24/02/2023

Description du poste

Type de métier

Types de métiers Crédit Agricole S.A. - Systèmes d'information / Maîtrise d'Ouvrage

Intitulé du poste

STAGE - Data Ingénieur / DataOps-industrialisation du process de versioning des données H/F

Type de contrat

Stage

Durée (en mois)

6 mois

Date prévue de prise de fonction

01/04/2023

Poste avec management

Non

Cadre / Non Cadre

Non cadre

Missions

Contexte du stage :

Le DataOps est un cadre qui permet d’industrialiser la gestion du cycle de vie de la donnée. Il s’inspire du DevOps mais la génération et la livraison de code n'est qu'une partie. Pour être efficace, il doit aussi gérer la collaboration entre des équipes qui ne sont pas forcément habituées à travailler ensemble (Métiers, Data Scientists, Data Engineers, experts IT).

 

Objectifs du stage :

L’objectif de ce stage est d’industrialiser une composante clé du DataOps : le versioning des données dans les pipelines de traitement. Pour ce faire, des outils et plateformes sont pressentis :

· DVC (Data Version Control)

·  Pachyderm

 

Organisation et livrables :

Afin de livrer des fonctionnalités intégrables aux solutions industrielles du DataLab Groupe, le stage se déroule :

· Au sein d’une Squad pluridisciplinaire (Data Science / Data & AI Engineering) travaillant selon la méthode Projet du DataLab Groupe qui fait l’objet d’une certification,

· Sous l’encadrement d’experts Data & IA et avec un référent fonctionnel chef de projet.

 

Les étapes clés du stage sont les suivantes :

· Contribution à la mise en place des prérequis techniques (environnements, données, ...) ;

· Réalisation d’un Benchmark entre les outils DVC et Pachyderm ;

· Contribution à la définition et à la mise en place du processus industriel cible ;

· Rédaction d’une documentation technique détaillée et d’un cahier d’exploitation.

Localisation du poste

Zone géographique

Europe, France, Ile-de-France, 92 - Hauts-De-Seine

Ville

Montrouge

Profil recherché

Critères candidat

Niveau d'études minimum

Bac + 5 / M2 et plus

Formation / Spécialisation

Université / Ecole d’ingénieur

 

Spécialisation : Big Data, Système d’information et Génie Logiciel, Data Engineer, Intelligence Artificielle

Niveau d'expérience minimum

0 - 2 ans

Compétences recherchées

Compétences techniques ou spécifiques au poste:

-        Architecture logicielle

-        Développement Python, Java

-        CI/CD

-        DevOps/DataOps

-        La conception des bases de données

 

Compétences générales et transverses :

-        Autonomie et communication

-        Rigueur

-        Innovation/R&D et force de proposition

-        Travail en équipe

Outils informatiques

Python, DVC, MongoDB, MLFlow, KubFlow, Kubernetes, Kafka, ElasticSearch, Kibana, NGinx, Celery, Redis, ReactJS, Docker

Langues

Français