Data Engineer Python (H/F)

✨ Rejoignez une équipe Produit ambitieuse pour construire la colonne vertébrale data d'un acteur industriel majeur en pleine transformation numérique.

Au sein d'un grand groupe industriel international, une Data Marketplace développée en interne joue le rôle de guichet unique data pour l'ensemble des collaborateurs. Le tout enrichi de fonctionnalités IA avancées.

Déployée en 2025 auprès de ~100 utilisateurs pilotes, la plateforme va progressivement s'étendre à 8 000 collaborateurs dans 19 pays d'ici 2028.

Le produit entre dans une phase charnière : industrialisation, scalabilité, et montée en puissance IA.

Vous rejoignez l'équipe Produit core pour porter l'excellence technique de cette plateforme stratégique au cœur de la transformation data du groupe.

🚀 La mission

En tant que Data Engineer, vous développez et maintenez des flux de données complexes sur AWS et Azure.

Vous concevez des processus de Data Quality robustes et êtes le garant de la performance de la plateforme face à des volumes de données croissants.

Vous travaillez en binôme étroit avec le Product Owner et l'équipe data pour traduire les besoins métier en solutions techniques élégantes et durables dans un contexte international et à fort enjeu de scalabilité.

⚙️ Responsabilités clés

• Développement de fonctionnalités :
  Développer et maintenir des pipelines de données complexes en Python et Scala, en garantissant la fidélité aux spécifications.

• Architecture back-end :
  Concevoir et faire évoluer une architecture modulaire, scalable et réutilisable pour absorber la montée en charge progressive.

• Data Quality & Monitoring :
  Mettre en place des contrôles de qualité, optimiser les temps d'ingestion, gérer les retry et assurer le monitoring des flux.

• Rituels agiles & code review :
  Collaborer activement en mode agile, participer aux revues de code pour garantir maintenabilité et Clean Code.

• Documentation technique :
  Documenter les choix d'architecture et contribuer à la capitalisation de la connaissance de l'équipe.

💡 Stack technique

Python 3, Scala / Spark, AWS Lambda, AWS Glue, Redshift, Step Functions, DynamoDB, Azure Functions, CosmosDB, Event Hub, Event Grid, Kafka, Kinesis, API REST, Git / CI-CD, Tests automatisés.

📍 Localisation

La Défense