Stagiaire Assistant IA / DATA - Fiabilité LLM H/F - Crédit Mutuel Arkéa

Description de l'offre

Description

Description du poste

Métier

METIERS - Data

Intitulé du poste

Stagiaire Assistant IA / DATA - Fiabilité LLM H/F

Contrat

STAGE

Votre mission

Stage de 6 mois à pourvoir sur Brest à partir du 02/03/2026.

·  État de l'art : Effectuer une revue de la littérature sur les techniques d'estimation de l'incertitude (uncertainty quantification) dans les LLM, en se concentrant sur les méthodes basées sur les probabilités.
·  Implémentation : Mettre en œuvre plusieurs approches (supervisées et non supervisées) pour calculer un score de fiabilité à partir des logits ou des probabilités des tokens générés.
·  Expérimentation :
·  Définir un protocole d'évaluation robuste sur des benchmarks académiques (ex: questions avec réponses correctes/incorrectes connues).
·  Comparer les performances des méthodes développées par rapport à des baselines (ex: "LLM-as-a-Judge").
·  Analyse : Analyser l'efficacité des différentes méthodes, leur coût computationnel, et leur capacité à détecter différents types d'erreurs (hallucinations, erreurs factuelles).
·  Synthèse : Rédiger un rapport technique détaillant les méthodes, les résultats et les recommandations pour une mise en production. Et si c'était vous ?
·  Étudiant(e) en Master 2 ou dernière année d'École d'Ingénieur en Informatique, Data Science, ou Intelligence Artificielle.
·  Solides compétences en Python et dans un framework de Deep Learning (PyTorch ou TensorFlow).
·  Bonnes connaissances théoriques en Machine Learning et Deep Learning.
·  Qualités : Rigueur scientifique, curiosité, autonomie et esprit critique Qui sommes-nous ?

L'IA Factory, intégrée au Data Office d'Arkea Service Informatique, agit comme le moteur d'expérimentation et d'industrialisation de l'IA pour le groupe.
Sa mission est de développer et déployer des solutions IA robustes, sécurisées et scalables, en réponse directe aux besoins métier.
Elle pilote la mise en œuvre de la feuille de route IA du groupe, inscrite dans le plan moyen terme du Crédit Mutuel Arkea.
Elle maîtrise un large spectre technologique : du Machine Learning classique aux solutions d'IA Générative.

L'IA Factory gère le cycle de vie complet des modèles (MLOps) : de l'expérimentation, l'entraînement et le "fine-tuning", au déploiement continu (CI/CD) et à l'intégration dans le SI.

Elle est la garante de la gouvernance des modèles, et standardise les plateformes, les architectures (ex: RAG) et les bonnes pratiques (incluant le "prompt engineering").
Son efficacité repose sur une équipe pluridisciplinaire et centralisée :
·  Data Scientists : Conception des algorithmes, R&D, expertise NLP/LLM.
ML/Data Engineers : Industrialisation, construction des pipelines de données (structurées/non structurées), gestion MLOps et architectures RAG.
·  Product Owners/chefs de projet IA : Pilotage des cas d'usage et interface (traduction) entre les exigences métier et la réalisation technique. Localisation du poste

Lieu

Brest

Critères candidat

Niveau d'études min. requis

BAC+4