Stage - Data Engineer H/F
Stage Palaiseau (Essonne)
Description de l'offre
L'intégration s'effectue au sein du Data & IA Hub de SOCOTEC, au milieu d'un collectif aux compétences variées dont le rôle est de concevoir, d'implémenter et d'assurer le suivi de l'architecture Data globale du groupe.
Le poste implique une participation active à l'évolution du Lakehouse SOCOTEC, socle de l'environnement analytique à l'échelle mondiale, ainsi qu'à des initiatives de valorisation de données, de leur structuration jusqu'à leur représentation visuelle.
Chez SOCOTEC, les parcours professionnels se construisent sur mesure, qu'il s'agisse d'orientation vers l'expertise technique ou le management (lead data). Des échanges avec l'international (USA, Royaume-Uni, Italie, Espagne, Pays-Bas) ainsi que des perspectives de mobilité géographique sont envisageables.
L'entreprise s'appuie sur une charte de valeurs articulée autour de la cohésion et du dynamisme, de la performance et de la qualité, ainsi que de l'innovation et de l'excellence technique.
Le stage s'articule autour de trois axes de travail majeurs :
· Concevoir des flux de données complets (collecte, traitement, modélisation et mise à disposition) tout en participant à l'élaboration de visualisations avec Databricks SQL ou Power BI.
· Faire évoluer continuellement le Lakehouse SOCOTEC, en intervenant particulièrement sur la qualité, la gouvernance ainsi que la pseudonymisation de l'information.
· Tester des usages liés à l'IA générative dans l'écosystème data, à l'image de GenIE de Databricks, afin d'extraire des enseignements utiles depuis des requêtes textuelles.
L'environnement technologique mobilisé comprend :
· Amazon Web Services (AWS) et S3
· Databricks
· Airbyte
· Spark pour la mise en place des flux ETL
· Gitlab pour la gestion des versions du code source
· Power BI pour la partie décisionnelle, gérée en collaboration avec les équipes BI
Profil recherché :
· Formation de niveau Master en Informatique, Big Data ou Ingénierie logicielle, démontrant un intérêt prononcé ou une spécialisation pour les architectures distribuées et la data.
· Solide maîtrise des bases de données relationnelles SQL et NoSQL (optimisation des requêtes, modélisation, performance et intégrité).
· Bonne compréhension des mécanismes de traitement distribué et des architectures Big Data (Delta Lake, Hadoop, Spark, Airflow, Kafka...).
· Pratique des outils de travail collaboratif et de développement tels que Git, GitLab, VS Code et Jupyter Notebooks.
· Connaissances souhaitées concernant l'écosystème cloud AWS (Redshift, Glue, S3, EMR, Lambda).
· Notions des concepts DataOps (monitoring, intégration continue/déploiement continu, qualité de données), d'ETL/ELT et d'architecture Data Lakehouse.
· Attrait pour les nouvelles technologies, tout particulièrement l'IA générative et son inclusion au sein d'environnements Data.
· Autonomie, esprit d'analyse et de sagacité, accompagnés de qualités notables dans l'expression et la structuration du code.
· Rigueur, aptitude au travail collectif au sein d'un cadre agile et sens du service.
· Intérêt pour le traitement de problématiques complexes et curiosité facilitant l'assimilation rapide de nouveaux paradigmes et outils.
· Pratique courante et technique de la langue anglaise, aussi bien à l'oral qu'à l'écrit.
Le Data & IA Hub propose une ambiance de travail inspirée de l'esprit start-up, réunissant une équipe jeune soutenue par une démarche RH axée sur la satisfaction des salariés.
Dans le cadre de la progression des compétences, SOCOTEC prend en charge le passage de deux certifications internationales : Cloud Pratictioner AWS ainsi que AWS Certified Machine Learning - Specialty.
Le stage est basé à Palaiseau (91120), en Île-de-France, sans formule de télétravail. Le niveau attendu correspond à Ingénieur/Cadre/Bac +5, pour une gratification comprise entre 1 000 et 1 300 EUR par mois.