Vereinigte Staaten
The MITRE Corporation
Zurich Insurance Company Ltd.
Data Engineer - Databricks
Vereinigte Staaten
Ciudad de México, Mexico · New Mexico, United States
PythonSQL
Automatische Übersetzung. Prüfe das Original.
Über die Stelle
#ZCC Zurich Capability Center stellt derzeit ein:
Data Engineer - Databricks
Aufgaben
Als Data Engineer umfassen Ihre Hauptaufgaben:
- Entwurf, Aufbau und Wartung skalierbarer Datenpipelines unter Verwendung von Databricks und cloudbasierten Datenplattformen.
- Entwicklung, Optimierung und Automatisierung von ETL/ELT-Prozessen zur Unterstützung von Analyse-, Berichts- und machine learning-Initiativen.
- Enge Zusammenarbeit mit Data Scientists, Analysten, ML Engineers und Stakeholdern aus dem Geschäftsbereich, um Datenanforderungen zu verstehen und zuverlässige Datensätze zu liefern.
- Implementierung von Datenaufnahme-Frameworks aus mehreren strukturierten und unstrukturierten Datenquellen.
- Aufbau und Wartung von Datenmodellen, Data Lakes und Data Warehouses, die die Analyseanforderungen des Unternehmens unterstützen.
- Sicherstellung von Datenqualität, -konsistenz, -governance und -sicherheit über alle Plattformen hinweg.
- Optimierung von Spark-Workloads und Databricks-Umgebungen hinsichtlich Leistung und Kosteneffizienz.
- Unterstützung der Bereitstellung und Operationalisierung von machine learning-Lösungen durch Bereitstellung produktionsreifer Datensätze und Feature-Pipelines.
- Zusammenarbeit mit Azure, IT und DevOps-Teams zur Implementierung von CI/CD und DataOps-Best Practices.
- Überwachung, Fehlerbehebung und kontinuierliche Verbesserung der Leistung und Zuverlässigkeit der Datenplattform.
Ihre Fähigkeiten und Erfahrungen
Als Data Engineer umfassen Ihre Fähigkeiten und Erfahrungen idealerweise:
Erforderlich
- Bachelor-Abschluss in Informatik, Ingenieurwesen, Informationssystemen, Mathematik oder einem verwandten Fachgebiet.
- 3+ Jahre Erfahrung in Data Engineering, Data Warehousing oder Big Data-Umgebungen.
- Starke Programmierkenntnisse in Python und SQL.
- Praktische Erfahrung mit Databricks, Apache Spark und verteilter Datenverarbeitung.
- Erfahrung in der Konzeption und Entwicklung von ETL/ELT-Datenpipelines.
- Erfahrung in der Arbeit mit Data Lakes und modernen Datenarchitekturen.
- Verständnis von Datenmodellierungskonzepten, einschließlich Sternschema und dimensionaler Modellierung.
- Erfahrung in der Arbeit mit Git und Versionskontrollsystemen.
- Starke analytische Fähigkeiten und Problemlösungskompetenz.
- Englischkenntnisse auf B2-Niveau oder höher.
Bevorzugte Qualifikationen
- Erfahrung mit Azure Data Platform-Diensten, einschließlich:
- Azure Databricks
- Azure Data Factory
- Azure Data Lake Storage
- Azure Synapse Analytics
- Azure DevOps
- Erfahrung in der Arbeit mit Delta Lake und Lakehouse-Architektur.
- Kenntnisse von Orchestrierungstools wie Airflow, Databricks Workflows oder Azure Data Factory.
- Erfahrung in der Unterstützung von machine learning-Anwendungsfällen und MLOps-Praktiken.
- Vertrautheit mit MLflow und Modellbereitstellungsprozessen.
- Kenntnisse von CI/CD, Infrastructure as Code und DataOps-Praktiken.
- Erfahrung mit Streaming-Technologien wie Kafka oder Event Hubs.
- Erfahrung in der Arbeit in agilen Umgebungen.
- Erfahrung in der Versicherungsbranche ist von Vorteil.
Nice to Have
- Erfahrung in der Zusammenarbeit mit Data Science-Teams und der Unterstützung von KI/ML-Initiativen.
- Kenntnisse von Generative AI, LLM-Datenpipelines, Vektordatenbanken und Embedding-Workflows.
- Erfahrung mit Unity Catalog, Data Governance und Metadatenmanagement.
- Einblick in Cloud-native Architekturen und unternehmensweite Datenplattformen.
*
Wenn Sie interessiert sind, bewerben Sie sich bitte direkt über diesen Link oder senden Sie Ihren Lebenslauf an nathalia.huerta@mx.zurich.com [nathalia.huerta@mx.zurich.com].
Position nur für Kandidaten verfügbar mit Wohnsitz in Mexiko-Stadt, Bundesstaat Mexiko oder Guadalajara. Bitte bewerben Sie sich nur, wenn Sie in einer dieser Regionen wohnen.
Wer wir sind
Suchen Sie ein herausforderndes und inspirierendes Arbeitsumfeld, in dem Sie etwas bewirken können? Bei Zurich vertrauen täglich Millionen von Einzelpersonen und Unternehmen unseren Produkten und Dienstleistungen. Unsere 53,000 Mitarbeiter weltweit bilden die Grundlage unseres Erfolgs und ermöglichen es Unternehmen und Gemeinschaften, sich mit Zuversicht einer Welt voller Risiken zu stellen. Stellen Sie sich vor, Sie könnten Menschen auf der ganzen Welt dabei helfen. Sie würden ihnen Vertrauen und Sicherheit geben, indem Sie das schützen, was sie am meisten lieben. Es ist eine große Herausforderung, aber Sie werden von einem erstklassigen Team unterstützt, das daran glaubt, Ihnen zu helfen, Ihr volles Potenzial auszuschöpfen und unsere Versprechen einzuhalten. Seien Sie also herausgefordert. Seien Sie inspiriert. Helfen Sie uns, etwas zu bewirken.
Bei Zurich sind wir ein Arbeitgeber, der Chancengleichheit bietet. Wir ziehen die besten qualifizierten Personen an und binden sie, unabhängig von Rasse/Ethnie, Religion, Geschlecht, sexueller Orientierung, Alter oder Behinderung.
Mehr Möglichkeiten mit einem Profil
Für mehr Stellen berücksichtigt werden, ohne den ganzen Prozess zu wiederholen? Erstellen Sie Ihr Profil, damit Unternehmen auf Nort Sie finden.
Profil erstellen