Portugal
ambi.
Rhenus Logistics
Senior Data Engineer
Portugal
Hilden, North Rhine-Westphalia, Germany · Holzwickede, North Rhine-Westphalia, Germany · Buccinasco, Lombardy, Italy · Warsaw, Masovian Voivodeship, Poland · Loures, Portugal · Barcelona, Catalonia, Spain
SQL
Automatische Übersetzung. Prüfe das Original.
Was Sie erwartet
Über die Rolle
Wir suchen einen erfahrenen und lösungsorientierten Azure Data Platform Engineer zur Entwicklung, zum Betrieb und zur Optimierung unserer modernen, auf Azure basierenden Datenplattform. In dieser Rolle konzentrieren Sie sich auf Azure, Databricks, Dateninfrastruktur und CI/CD, unterstützen Multi-Tenant-Umgebungen und ermöglichen zuverlässige, skalierbare Datenlösungen.
Hauptverantwortlichkeiten
- Entwicklung einer modernen Azure Datenplattform: Entwurf, Aufbau und Betrieb von End-to-End-Datenlösungen unter Verwendung von Azure Data Factory, Azure Data Lake Storage Gen2, Databricks und Azure Synapse Analytics.
- Erstellung von Datenpipelines: Entwicklung und Wartung skalierbarer ETL/ELT-Pipelines mit PySpark und Spark, mit starkem Fokus auf Datenqualität, Zuverlässigkeit und Leistung.
- Unterstützung von Multi-Tenant- & Umgebungen: Unterstützung und Betrieb von Multi-Tenant-Datenplattformen über mehrere Umgebungen hinweg (Entwicklung, Test, Produktion) mit klarer Trennung und Governance.
- Infrastruktur- & Plattformbetrieb: Bereitstellung, Konfiguration und Wartung der Azure Dateninfrastruktur, um Stabilität, Sicherheit und Skalierbarkeit zu gewährleisten.
- CI/CD für Datenplattformen: Aufbau und Wartung von CI/CD-Pipelines für Datenpipelines und Databricks-Workloads, um automatisierte Deployments über Umgebungen hinweg zu ermöglichen.
- Kosteneffiziente & Best-Practice Azure-Nutzung: Anwendung von Azure Best Practices zur Optimierung von Leistung und Kosten, einschließlich Ressourcengröße, Lebenszyklusmanagement und Kostenüberwachung.
- Zusammenarbeit mit BI- & Datenteams: Enge Zusammenarbeit mit BI- und Datenteams zur Unterstützung effizienter Datenmodelle und Reporting-Lösungen.
- Data Governance & Sicherheitsgrundlagen: Unterstützung von Data-Governance-Anforderungen wie Zugriffskontrolle, sichere Datenhandhabung und grundlegendes Metadatenmanagement.
Was Sie mitbringen
- Azure Datenplattform-Erfahrung: Mehrjährige praktische Erfahrung mit Azure Data Factory, ADLS Gen2, Databricks und Azure Synapse Analytics.
- PySpark & Spark: Starke Erfahrung im Aufbau verteilter Datenverarbeitungspipelines mit PySpark und Spark.
- ETL / ELT-Kenntnisse: Solides Verständnis von ETL/ELT-Konzepten und Data-Modeling-Praktiken.
- CI/CD & Automatisierung: Erfahrung mit CI/CD-Pipelines für Daten-Workloads und grundlegende Automatisierung von Deployments.
- SQL-Kenntnisse: Starke SQL-Kenntnisse und Erfahrung in der Optimierung analytischer Abfragen.
- Datenformate: Praktische Erfahrung mit Parquet und/oder Avro.
- Infrastruktur-Bewusstsein: Gutes Verständnis der Azure-Ressourcenstruktur, Umgebungen und operativen Best Practices.
- Analytischer & Teamorientierter Denkansatz: Lösungsorientierter Ansatz mit der Fähigkeit, unabhängig und kollaborativ zu arbeiten.
- Sprachkenntnisse: Fließende Englischkenntnisse sind erforderlich; Deutschkenntnisse sind von Vorteil.
Hinweis: Dies ist eine Remote-Position innerhalb der Europäischen Union. Kandidaten müssen in einem Land ansässig sein, in dem Rhenus Overland Transport bereits vertreten ist.
Mehr Möglichkeiten mit einem Profil
Für mehr Stellen berücksichtigt werden, ohne den ganzen Prozess zu wiederholen? Erstellen Sie Ihr Profil, damit Unternehmen auf Nort Sie finden.
Profil erstellen
