ALTEN
Rhenus Logistics
Data Engineer (h/f/d)
PythonAWSKubernetes
Traduction automatique. Consultez l’original.
Ce que vous pouvez attendre
- Vous développez et exploitez des pipelines de données sur notre plateforme de données d'entreprise (EDP) native cloud et travaillez en étroite collaboration avec les équipes d'analytique ainsi que les départements métiers afin de fournir des produits de données pour le reporting, l'analytique et les processus opérationnels.
- De plus, vous intégrez des données provenant de sources très variées (par ex. APIs, bases de données, streaming, fichiers) dans notre plateforme et assurez leur traitement fiable ainsi que leur disponibilité.
- En outre, vous concevez, implémentez et exploitez des pipelines de données évolutifs (batch & streaming) basés sur Spark, Delta Lake et Kubernetes – de l'ingestion jusqu'à la mise à disposition dans la couche Gold.
- Vous développez continuellement notre plateforme de données d'entreprise (EDP) et travaillez avec une architecture Lakehouse moderne (Delta Lake, modèle en médaillon) dans un environnement multi-tenant sur AWS.
Ce que vous apportez
- Vous avez terminé avec succès vos études en informatique (de gestion) ou une formation comparable – ou vous possédez une expérience pratique correspondante en ingénierie des données.
- Vous avez de l'expérience dans la modélisation de données et le traitement de grands volumes de données, ainsi qu'une bonne compréhension de la qualité des données, de la transformation et des flux de données.
- De plus, vous maîtrisez les technologies cloud (idéalement AWS) ainsi que les composants modernes de la pile de données tels que Spark, Kubernetes ou l'orchestration de workflows (par ex. Airflow) et disposez de très bonnes compétences en programmation en Python et PySpark.
- Les termes et concepts tels que Kubernetes, Clean Code, Medallion Architecture, POO ou Kafka ne vous sont pas inconnus.
- Vous travaillez de manière structurée, prenez la responsabilité de vos sujets et évoluez avec aisance dans un environnement de développement collaboratif basé sur Git.
- Grâce à votre maîtrise courante de l'allemand et de l'anglais, vous communiquez avec assurance dans un contexte technique.
