Data Engineer Espace de données fédéré & Data Marketplace - Banque - Freelance
Freelance Paris (Paris)
Description de l'offre
Modalités de la mission
Démarrage : ASAP
Durée : mission longue
Rythme : hybride 3/2
Lieu : Île-de-France
Contexte
Un grand groupe bancaire construit un espace de données fédéré incluant une Data Marketplace. Le Data Engineer rejoint une squad pour construire, industrialiser et intégrer les composants techniques de la plateforme aux côtés de l'éditeur retenu et des entités du groupe.
Ce que vous allez faire
Concevoir et industrialiser les pipelines d'ingestion, de transformation et d'exposition (qualité, performance, observabilité)
Mettre en œuvre les connecteurs avec les SI des entités (catalogues, référentiels, plateformes data on-prem et cloud, fédération d'identité)
Contribuer aux produits de données : contrats de données, métadonnées, qualité, traçabilité
Industrialiser CI/CD, IaC et DataOps sur les composants livrés
Garantir la sécurité et la traçabilité des flux (chiffrement, secrets, habilitations, RGPD, DORA, BCBS 239)
Accompagner les entités et documenter patterns de connecteurs et runbooks
Profil recherché
Compétences attendues
Expérience confirmée en ingénierie data sur des flux distribués
Compréhension des contraintes d'un SI bancaire régulé
Collaboration en environnement multi-squads, communication claire, pédagogie
Orientation valeur, performance, sécurité et conformité
Compétences techniques
Impératif : Spark, Kafka, Airflow, dbt, SQL/NoSQL, formats Iceberg/Delta/Parquet, Docker, Kubernetes, CI/CD, Terraform/Ansible, AWS et on-prem
Nice to have : standards Data Spaces (Gaia-X, IDSA, EDC), data catalogues, expérience secteur bancaire
À propos de Collective.work
Collective.work est la plateforme de recrutement nouvelle génération pour trouver votre prochain emploi.
Fort d'une grande expertise dans l'IA, Collective.work permet de mieux cibler les offres et leurs candidats correspondants, créant ainsi un système beaucoup plus fluide que les acteurs traditionnels.
Plus de 10,000 recruteurs utilisent Collective, permettant à des dizaines de milliers de candidats de trouver leur futur emploi chaque jours