Stage - Data Engineer H/F

Description de l'offre

L'intégration s'effectue au sein du Data & IA Hub de SOCOTEC, au contact d'un collectif pluridisciplinaire en charge de la conception, de l'implémentation et de la maintenance de l'architecture Data globale du groupe. L'activité porte sur l'évolution du Lakehouse SOCOTEC, pilier de la plateforme analytique internationale, ainsi que sur des initiatives de valorisation des données allant de leur modélisation jusqu'à la data visualisation.

L'entreprise co-construit les parcours professionnels selon les aspirations de chacun (voie d'expertise technique, management d'équipe tel que lead data, etc.). Des échanges réguliers ont lieu avec des interlocuteurs internationaux (US, UK, ITA, ESP, NL), et des perspectives de mobilité internationale existent.

Les interventions s'articulent autour de trois axes fondamentaux :

·  Créer des pipelines de données intégraux, de l'ingestion jusqu'à l'exposition en passant par la transformation et la modélisation, tout en participant à l'élaboration de visualisations via Databricks SQL ou Power BI.
·  Prendre part à l'optimisation continue du Lakehouse SOCOTEC, en ciblant particulièrement les aspects de qualité, de gouvernance et de pseudonymisation des données.
·  Tester des outils d'IA générative dédiés à la donnée, à l'image de GenIE de Databricks, afin de convertir des requêtes en langage naturel en analyses directement exploitables.

L'environnement technologique comprend :

·  Databricks et Amazon Web Services (AWS) avec S3.
·  Airbyte.
·  Spark pour la gestion des flux ETL.
·  Gitlab pour la gestion des versions du code source.
·  Power BI pour la partie décisionnelle, en lien avec les équipes BI.
·  Préparation d'un diplôme de niveau Master ou équivalent en Big Data, Informatique ou Ingénierie logicielle, avec un intérêt marqué ou une spécialisation pour les architectures distribuées et la data.
·  Très bonnes compétences relatives aux bases de données SQL et NoSQL (optimisation des requêtes, modélisation, performance et intégrité).
·  Compréhension approfondie des outils de traitement distribués ainsi que des architectures Big Data (Kafka, Delta Lake, Spark, Hadoop, Airflow...).
·  Pratique avérée des outils de développement collaboratif (VS Code, Jupyter Notebooks, Git, GitLab).
·  Notions valorisées sur les offres cloud d'AWS (Redshift, Glue, S3, Lambda, EMR).
·  Connaissance des méthodes DataOps (surveillance, intégration et déploiement continus, qualité des données), des concepts ETL/ELT et de l'architecture Data Lakehouse.
·  Appétence envers les innovations technologiques, notamment l'intégration de l'IA Générative au sein des environnements Data.
·  Niveau d'anglais courant et technique, tant à l'expression orale qu'à l'écrit.
·  Aptitudes démontrées en communication et rigueur dans l'écriture du code.
·  Autonomie, sagacité, esprit de service, esprit d'équipe et orientation vers la résolution de problématiques complexes.
·  Curiosité pour la technique, capacité d'apprentissage rapide et goût pour le travail collectif en cadre agile.

Le Data & IA Hub propose une ambiance de type Start-up, portée par une équipe jeune et une démarche RH axée sur la satisfaction des salariés. Les missions s'inscrivent dans des chantiers d'envergure offrant une réelle implication.

Dans le cadre du développement des compétences, SOCOTEC prend en charge le coût de deux certifications d'envergure internationale : AWS Certified Machine Learning - Specialty et Cloud Pratictioner AWS.

L'adhésion aux valeurs de l'entreprise est attendue :

·  Performance & Qualité
·  Innovation & Excellence Technique
·  Cohésion & Dynamisme