Machine Learning Engineer, Evaluation, Agentic Search Capabilities

Das Agentic Search Team definiert neu, wie Hunderte Millionen von Menschen auf Informationen über Apple-Geräte zugreifen, wobei der Datenschutz von Grund auf integriert ist. Als Teil des Agentic Search Evaluation Teams helfen Sie, Apple Intelligence durch personalisierte Suche voranzutreiben, die Erlebnisse in Siri, Spotlight, Mail, Messages und mehr ermöglicht. Ihr Team erforscht und baut tiefe Suchsysteme für Personal Question Answering, die es Siri ermöglichen, Fragen zu E-Mails, Nachrichten, Ereignissen, Dateien und mehr eines Benutzers zu beantworten und gleichzeitig persönliche Daten privat zu halten.

Wir suchen einen erfahrenen Machine Learning Engineer mit einer Leidenschaft für den Aufbau skalierbarer, qualitativ hochwertiger Lösungen zur Bewertung personalisierter agentischer Suchanwendungen. In dieser Rolle werden Sie direkt beeinflussen, wie wir die Qualität neuartiger agentischer Suchanwendungen bewerten und verbessern, indem wir Lösungen für die Datengenerierung, die Bewertung der Datenqualität, Offline- und Online-Metriken sowie Methoden zur Bewertung von statistischen Modellen und Suchqualität vorantreiben. Ihre Arbeit wird die Qualität innovativer personalisierter agentischer Sucherlebnisse auf Siri und Apple-Produkten beeinflussen. In dieser Rolle haben Sie die Möglichkeit, skalierbare Systeme für die umfassende Bewertung von personalisierten Modell- und Suchsystemen zu entwickeln, Methoden zur Datengenerierung und -kuratierung zur Unterstützung von Bewertungen zu entwickeln und Online- und Offline-Metriken für die Bewertung der Produktqualität zu entwerfen. Unser Team ist verantwortlich für Modelle und die Bewertung von Sucherlebnissen, die die Fragen der Benutzer anhand ihrer persönlichen Dokumente beantworten, wobei der Datenschutz im Vordergrund steht.

6+ Jahre Branchenerfahrung im Aufbau von Machine Learning oder ML-Evaluationssystemen im großen Maßstab. Starke Software-Engineering-Kenntnisse in gängigen Programmiersprachen wie: Python, C/C++. Fähigkeit, Ideen und Lösungen schnell zu prototypisieren und kritische Analysen durchzuführen. Starke Kommunikationsfähigkeiten und die Fähigkeit, Lösungen in Zusammenarbeit mit Partnerteams voranzutreiben. Bachelor-Abschluss in Informatik, Ingenieurwesen, Statistik oder einem verwandten Fachgebiet.

Erfahrung im Design und Aufbau von Produktions-ML-Systemen und -Anwendungen in den Bereichen Suche, NLP, Empfehlungssysteme oder Information Retrieval. Erfahrung in der Datensammlung, Datengenerierung und/oder Bewertung der Datenqualität von Sprach-, Bild- oder multimodalen Daten. Starke Fähigkeiten zur Entwicklung von Qualitätsmetriken; Interpretation von Bewertungen; und Präsentation vor Führungskräften. Fortgeschrittener Abschluss (Master oder Ph.D.) in Informatik, Ingenieurwesen, Statistik oder einem verwandten Fachgebiet oder gleichwertige Branchenerfahrung.