Data Engineer Java / Spark (Toulouse) (H/F)

Vous intégrerez une équipe transverse et multidisciplinaire composée de développeurs back-end, de data engineers et de data scientists.

Votre mission

Vous aurez pour mission de :

  • Développer des jobs Spark pour la manipulation de gros volumes de données, couvrant les pipelines d'ingestion, de nettoyage, de préparation, d'enrichissement et de croisement des données.
  • Mettre à jour les collections de données dans le datalake et rendre ces données disponibles pour les modèles de Machine Learning.
  • Enrichir le "serving layer" et exposer les données produites via des web services Rest, permettant leur intégration dans des applications métier.
  • Mener les développements Big Data jusqu'à la mise en production.
  • Assurer la maintenance corrective des solutions Big Data en place.
  • Accompagner les équipes développant des modèles ML dans leur industrialisation et leur montée en compétences.
  • Collaborer avec les différents interlocuteurs métiers et techniques

Cette mission offre 2 jours de télétravail à Balma.

Profil

  • De formation minimum BAC+5 en informatique ou équivalent.
  • Vous avez une expérience minimum de 2 ans en java et data
  • Vous aimez travailler en équipe, partager vos connaissances et relever des défis techniques.
  • Vous êtes curieux(se) et proactif(ve), toujours à la recherche de nouvelles solutions.

À compétences égales, tous nos postes sont ouverts aux personnes en situation de handicap.

Environnement technique

Vous serez amené(e) à travailler sur un environnement comprenant les technologies suivantes :

  • Langages : Java, Scala
  • Frameworks & Outils : Spark, Kafka
  • Conteneurisation et Orchestration : Docker, Kubernetes
  • Webservices : REST API
  • Tests : JUnit, Mockito