Vereinigte Staaten
SanMar- External
NewsBreak
Senior Data Infra Engineer
Vereinigte Staaten
Mountain View, California, United States
PythonSQLAWSGo
Automatische Übersetzung. Prüfe das Original.
Über NewsBreak
Das lokale Leben basiert auf lokalen Informationen. Was ist in der Nachbarschaft passiert? Wer kann hier helfen? Wo gehen wir heute Abend hin? NewsBreak wurde 2015 gegründet, um diese Fragen zu beantworten. Heute verlassen sich monatlich mehr als 40 Millionen Menschen auf uns, um zu verfolgen, was in ihrer Postleitzahlregion geschieht.
Drei Plattformen mit einer Vision: das lokale Leben voranzubringen. Unter der Leitung von Gründer und CEO Jeff Zheng ist NewsBreak unsere Plattform für lokales Leben und Nachrichten; Nearby AI verbindet Menschen mit lokalen Unternehmen; und NDot AI unterstützt Publisher und Creator beim Wachstum und bei der Monetarisierung.
Wir bauen langfristig. Eine Series-C-Finanzierung in Höhe von $115 Millionen machte uns 2021 zum Einhorn, und wir investieren kontinuierlich in unsere Mitarbeiter. Wir sind als Great Place to Work® zertifiziert und wurden in die Listen der Best Workplaces for Innovators von Fast Company (2025) sowie der Best Workplaces in the Bay Area™ von Fortune (2026) aufgenommen.
Jeder Einzelne leistet einen Beitrag. Egal, ob Sie programmieren, Produkte gestalten, unsere Geschichte erzählen oder das Geschäft führen – wir suchen Menschen, die Projekte von Anfang bis Ende verantworten, neugierig bleiben und ihre Meinung äußern. Kommen Sie zu uns.
Erfahren Sie mehr unter: NewsBreak, Nearby AI, NDot AI
ÜBER DIE ROLLE
NewsBreak erreicht täglich zig Millionen Nutzer. Jede Entscheidung beim Feed-Ranking, jede Empfehlung, jeder A/B-Test und jedes ML-Modell, das wir veröffentlichen, läuft auf der Dateninfrastruktur, für die Sie verantwortlich sind. Wir suchen einen Senior Engineer, der die Batch- und Streaming-Pipelines im Kern dieser Plattform aufbaut und skaliert – jemanden, der die Verantwortung von Anfang bis Ende übernimmt, die Zuverlässigkeit vorantreibt und unklare Geschäftsanforderungen in produktionsreife Datensysteme übersetzen kann.
AUFGABEN
- Verantwortung für das Streaming-Daten-Backbone – Entwurf und Betrieb von hochdurchsatzfähigen Kafka-Pipelines, die Nutzerereignisse (Klicks, Aufrufe, Impressionen, Shares) von mobilen Clients an nachgelagerte Konsumenten weiterleiten: das Data Warehouse und Echtzeit-Analysen.
- Aufbau und Wartung von Batch-Pipelines in großem Maßstab – Erstellung und Optimierung von Spark-Jobs, die täglich Milliarden von Zeilen verarbeiten: Content-Ingestion, Engagement-Aggregation und Feature-Berechnung auf Nutzerebene. Verantwortung für Pipeline-Zuverlässigkeit, Strategien für inkrementelle Backfills und die Kosten pro verarbeitetem TB.
- Vorantreiben der Pipeline-Observability – Implementierung von Datenqualitätsprüfungen, Freshness-Monitoren und Anomalie-Warnungen, damit Probleme erkannt werden, bevor sie Dashboards erreichen. Definition und Verantwortung für SLOs bezüglich Datenaktualität und -vollständigkeit.
- Modellierung strukturierter und unstrukturierter Daten – Entwurf von Datenmodellen, die Analyse- und Produktanwendungsfälle bedienen. Fungieren als zentraler Ansprechpartner für Daten über Teams hinweg und Einspruch erheben, wenn eine Schema-Entscheidung uns in sechs Monaten schaden könnte.
- Zusammenarbeit mit Data Scientists und Platform Engineers – Verständnis der Datenanforderungen über Teams hinweg und Vorantreiben wichtiger Entscheidungen zur Dateninfrastruktur. Unterstützung nachgelagerter Teams, ohne zum Flaschenhals für Tickets zu werden.
- Effizienzsteigerung – Reduzierung von Rechenkosten und Job-Latenz durch Abfrageoptimierung, intelligentere Partitionierung, bessere Ressourcenplanung und Strategien für Tiered Storage.
- Anheben des Plattform-Standards – Beitrag zur gemeinsamen Infrastruktur: Standards für Pipeline-Frameworks, Orchestrierungsmuster (Airflow), wiederverwendbare Spark-Bibliotheken und Hygiene des Datenkatalogs. Mentoring für Junior Engineers im Team.
ANFORDERUNGEN
- 5+ Jahre Erfahrung im Data Engineering, davon mindestens 3 Jahre mit der Verantwortung für Produktions-Pipelines in einer verteilten Datenumgebung.
- Fundierte praktische Erfahrung mit Spark und Kafka in großem Maßstab – Sie haben bereits Produktionsvorfälle in beiden Systemen behoben, nicht nur Tutorials durchlaufen.
- Erfahrung mit Big-Data-Technologien, einschließlich Hadoop, Presto/Trino und Flink.
- Kenntnisse in Python und SQL; Scala ist ein Plus.
- Erfahrung in einer Cloud-Umgebung, vorzugsweise AWS (S3, EMR, Glue, Redshift).
- Nachweisliche Erfolge bei der Verbesserung der Effizienz, Skalierbarkeit und Stabilität von Datensystemen – mit messbaren Ergebnissen.
- Bachelor- oder Masterabschluss in Informatik oder eine vergleichbare Qualifikation.
- Ausgeprägte Kommunikationsfähigkeiten; sicher im Vorantreiben von Entscheidungen zur Dateninfrastruktur über Anwendungs- und Plattformteams hinweg.
LEISTUNGEN
Wir bieten ein wettbewerbsfähiges Leistungspaket:
- Kranken-, Zahn- und Augenversicherung für Sie und Ihre Familie (100% Abdeckung für Mitarbeiter)
- Erstklassiger 401(K)-Plan mit Arbeitgeberzuschuss
- Bezahlter Urlaub und bezahlte Feiertage
- FSA-, HSA- und Pendler-Vorteilsprogramme
- Budget für Teamaktivitäten
Die US-Basisgehaltsspanne für diese Vollzeitstelle ist unten aufgeführt. Die Vergütung kann je nach verschiedenen Faktoren variieren, einschließlich berufsbezogener Fähigkeiten, Level, Erfahrung, geografischem Standort sowie relevanter Ausbildung oder Weiterbildung. Bei NewsBreak gestalten wir unser Gesamtvergütungspaket so, dass wir Top-Talente gewinnen. Je nach Position kann die Rolle auch für einen diskretionären Bonus und Optionen infrage kommen. Ihr Recruiter kann Ihnen während des Einstellungsprozesses weitere Details mitteilen.
Jährliche Basisgehaltsspanne
175,000—221,000 USD
CPRA-Datenschutzhinweis für Kandidaten in Kalifornien docs.google.com/document/d/15apsJLgHq1p5NJR3fzFmdctKX4QIzzf2/edit?usp=sharing&ouid=110601223912453011659&rtpof=true&sd=true
Mehr Möglichkeiten mit einem Profil
Für mehr Stellen berücksichtigt werden, ohne den ganzen Prozess zu wiederholen? Erstellen Sie Ihr Profil, damit Unternehmen auf Nort Sie finden.
Profil erstellen