ARCHITECTE SOLUTION DATA & IA – AGENTIC DATA PIPELINES (H/F) - CDI

Description de l'offre

Salaire: 60000

Contexte de la mission

Dans le cadre du développement de ses plateformes Data et de l'industrialisation de ses processus de production, notre client souhaite concevoir et développer une solution basée sur l'IA agentique, venant enrichir un générateur de Data Pipelines existant.

L'objectif est de concevoir un agent intelligent capable d'interagir avec les services et composants existants afin de faciliter, automatiser et optimiser la création de Data Pipelines.

Pour accompagner cette initiative, nous recherchons un Architecte Solution Data & IA disposant d'une solide expérience dans les architectures Data, le développement de solutions techniques et les environnements d'industrialisation de la donnée.

Nous recherchons avant tout un profil ayant une véritable culture Data, capable de comprendre les problématiques d'ingénierie Data, de concevoir une architecture cible pertinente et de contribuer concrètement à sa mise en œuvre.

Il ne s'agit pas d'un profil IA généraliste ou uniquement orienté stratégie : le candidat devra être capable de faire le lien entre les enjeux Data, l'architecture logicielle et les capacités offertes par les technologies d'IA agentique.

Vos missions

1. Analyse de l'existant et compréhension des processus Data

• Analyser de bout en bout le fonctionnement du générateur de Data Pipelines existant.

• Comprendre les processus de création, de configuration, de génération et d'exécution des pipelines.

• Identifier les composants techniques, services et fonctionnalités pouvant être exploités dans une approche agentique.

• Évaluer les possibilités d'intégration de capacités IA dans les processus existants.

• Identifier les limites, contraintes et dépendances de l'architecture actuelle.

• Challenger les choix techniques et déterminer les cas d'usage présentant une réelle valeur ajoutée.

2. Conception de l'architecture Solution Data & IA

• Définir l'architecture cible de la solution et ses principes de fonctionnement.

• Concevoir les interactions entre l'agent IA, le générateur de pipelines et les services existants.

• Déterminer comment exposer les services existants sous forme d'outils (tools) exploitables par l'agent.

• Définir les mécanismes d'orchestration, d'interaction et d'exécution.

• Produire les schémas d'architecture, les flux techniques et les diagrammes de séquence.

• Définir les interfaces et contrats d'échange entre les différents composants.

• Arbitrer entre une approche agentique et une approche plus déterministe lorsque celle-ci est techniquement et économiquement plus pertinente.

• Garantir la cohérence, la robustesse, la maintenabilité et l'évolutivité de la solution.

3. Conception et développement de la solution

• Contribuer concrètement à la réalisation de la première version de la solution.

• Participer à la conception et au développement des composants nécessaires à l'intégration de l'agent.

• Exploiter et faire évoluer les services existants pour permettre leur utilisation par l'agent.

• Travailler sur les mécanismes de génération et d'orchestration des Data Pipelines.

• Définir les interactions entre les modèles IA, les outils et les composants Data.

• Mettre en place les mécanismes de contrôle, de validation et de sécurisation des actions réalisées par l'agent.

• Participer aux tests techniques et à la validation de l'architecture retenue.

4. Cadrage et réalisation d'une première version (V1)

• Définir le périmètre fonctionnel et technique de la première version.

• Identifier un cas d'usage prioritaire et représentatif.

• Construire une trajectoire de réalisation réaliste sur une période d'environ deux mois.

• Démontrer la faisabilité technique et la valeur ajoutée de l'approche retenue.

• Identifier les axes d'amélioration et les évolutions possibles vers une solution industrialisée.

• Documenter les choix d'architecture et préparer la suite de la feuille de route.

Environnement technique

Le candidat devra présenter une bonne maîtrise des environnements Data Engineering et des architectures logicielles.

Environnement technique existant :

• Python.

• Apache Airflow.

• Starburst / Trino.

• Génération et orchestration de Data Pipelines.

• Architectures de services et API.

Compétences complémentaires recherchées :

• IA générative et architectures agentiques.

• Conception d'agents IA et orchestration d'outils (Tool Calling).

• Frameworks d'agents et d'orchestration : LangChain, LangGraph, LlamaIndex ou équivalents.

• API REST, microservices et intégration de composants.

• Architecture logicielle, patterns d'intégration et conception de solutions distribuées.

• Tests, observabilité, sécurité et industrialisation des solutions IA.

Profil recherché

Profil recherché

Nous recherchons un Architecte Solution disposant d'une expérience significative dans l'écosystème Data et ayant déjà travaillé sur la conception et la réalisation de solutions techniques complexes.

Le candidat devra impérativement présenter :

• Une expérience solide en Data Engineering et en architectures Data.

• Une excellente maîtrise de Python et une capacité à comprendre et concevoir des composants logiciels.

• Une expérience concrète dans la conception d'architectures de solutions.

• Une bonne compréhension des mécanismes de génération, d'orchestration et d'exécution de Data Pipelines.

• Une expérience sur des environnements d'orchestration tels qu'Airflow.

• Une connaissance des architectures API et des interactions entre services.

• Une première expérience concrète en IA générative, agents IA ou architectures agentiques.

• Une capacité à intervenir aussi bien sur les sujets d'architecture que sur les aspects techniques et de développement.

Une expérience sur Starburst, Trino ou des environnements équivalents constitue un véritable atout.

Qualités humaines et posture attendues

Nous recherchons un profil particulièrement intelligent, structuré et pragmatique, disposant d'une excellente capacité d'analyse et de synthèse.

Le candidat devra notamment faire preuve de :

• Excellente capacité de réflexion et de résolution de problèmes complexes.

• Forte curiosité technique et intérêt réel pour les sujets Data et IA.

• Capacité à prendre de la hauteur tout en sachant rentrer dans le détail technique.

• Esprit pragmatique : savoir challenger une approche et privilégier la solution la plus pertinente.

• Excellente communication et capacité à expliquer des choix d'architecture.

• Autonomie, proactivité et force de proposition.

• Capacité à travailler avec des équipes Data Engineering, Architecture et IA.

• Très bon relationnel et intelligence collective.

Résultat attendu de la mission

À l'issue de la mission, le candidat devra avoir :

• Réalisé une analyse complète du générateur de Data Pipelines existant.

• Défini et documenté une architecture cible.

• Identifié les services et outils pouvant être exposés à l'agent.

• Produit les schémas d'architecture et les diagrammes de séquence.

• Défini les principes d'interaction entre l'agent IA et les composants Data.

• Contribué à la réalisation d'une première version fonctionnelle sur un cas d'usage concret.

• Proposé une trajectoire d'industrialisation et les évolutions nécessaires.

Profil recherché : un véritable Architecte Solution Data, avec une forte culture Data Engineering et une appétence concrète pour l'IA agentique, capable de concevoir, challenger et réaliser une solution technique de bout en bout.

À propos de Collective.work

Collective.work est la plateforme de recrutement nouvelle génération pour trouver votre prochain emploi.

Fort d'une grande expertise dans l'IA, Collective.work permet de mieux cibler les offres et leurs candidats correspondants, créant ainsi un système beaucoup plus fluide que les acteurs traditionnels.

Plus de 10,000 recruteurs utilisent Collective, permettant à des dizaines de milliers de candidats de trouver leur futur emploi chaque jours