Data Engineer spark scala confirmé - Freelance
Freelance Paris (Paris)
Description de l'offre
Contexte
Nous recherchons un Data Engineer confirmé / senior (5 ans d’expérience minimum) pour le Data Office d’une entreprise du secteur des jeux au sein de l’équipe Core Data. Le poste est mi-run, mi-build : maintien en conditions opérationnelles d’un datalake AWS et développement de pipelines de transformation en grande volumétrie.
Missions
Maintien en conditions opérationnelles d’un datalake AWS
Développement de pipelines de transformation de données à grande volumétrie
Stack technique
Spark en Scala (maîtrise avancée, cœur du besoin)
Python
SQL
AWS (S3, EMR, EKS, Lambda, Athena)
GitLab / GitLab CI
Maven
Outils complémentaires appréciés
Dataiku (flows et webapp)
Kafka / MSK
Airflow
Terraform
Méthodologie Scrum/SAFe
Qualités attendues
Bon relationnel avec des interlocuteurs variés (métiers, techniques)
Rigueur (documentation, traçabilité)
Capacité à vulgariser
Conditions de travail
Secteur : paris et jeux
Localisation : Paris
Profil recherché
5 ans d’expérience minimum en Data Engineering
Maîtrise avancée de Spark en Scala
Compétences en Python, SQL et AWS (S3, EMR, EKS, Lambda, Athena)
Maîtrise de GitLab / GitLab CI et Maven
Un plus : connaissance de Dataiku (flows et webapp), Kafka / MSK, Airflow, Terraform, et méthodologie Scrum/SAFe
Qualités relationnelles : bon relationnel avec interlocuteurs métiers et techniques
Rigueur dans la documentation et la traçabilité
Capacité à vulgariser
À propos de Collective.work
Collective.work est la plateforme de recrutement nouvelle génération pour trouver votre prochain emploi.
Fort d'une grande expertise dans l'IA, Collective.work permet de mieux cibler les offres et leurs candidats correspondants, créant ainsi un système beaucoup plus fluide que les acteurs traditionnels.
Plus de 10,000 recruteurs utilisent Collective, permettant à des dizaines de milliers de candidats de trouver leur futur emploi chaque jours