Vereinigte Staaten
Be Structured Technology Group
PlayStation Global
Senior Software Development Engineer in Test, KI/ML
Vereinigte Staaten
San Mateo, California, United States
PythonJavaReactNode.jsAWSGCPDockerKubernetes
Automatische Übersetzung. Prüfe das Original.
Warum Sony Interactive Entertainment?
Sony Interactive Entertainment ist nicht nur der beste Ort zum Spielen — es ist auch der beste Ort zum Arbeiten. Sony Interactive Entertainment (SIE) ist das Unternehmen hinter der Marke PlayStation. Als Tochtergesellschaft der Sony Group Corporation sind wir Teil einer stolzen Tradition von Innovation und Exzellenz. SIE ist ein dynamisches Technologieunternehmen, das modernste Hardware und Netzwerkdienste für mehr als 100 Millionen Menschen bereitstellt, sowie ein führendes Unterhaltungsunternehmen, das einige der beliebtesten und bekanntesten geistigen Eigentumsrechte (IP) der Welt beherbergt. Unsere Aufgabe bei SIE ist es, die Erlebnisse unter der Marke PlayStation zu schaffen und zu pflegen – ein Name, der für Unterhaltungsexzellenz und Kreativität steht.
SENIOR SOFTWARE DEVELOPMENT ENGINEER IN TEST, ML/KI
Bei SIE glauben wir daran, das Spielen für alle sicherer zu machen. Innerhalb unseres Information Security-Teams schützen wir unsere Mitarbeiter, Plattformen und Produkte mit intelligenten, skalierbaren und durchdachten Lösungen. Unsere Mission ist es, klare, umsetzbare Erkenntnisse zu Risiken und Sicherheit zu liefern, die das Unternehmen leiten und großartige Spielerlebnisse ermöglichen.
Wir bauen ein Team auf, das von Zusammenarbeit, Neugier und der Bereitstellung echten Mehrwerts lebt. Helfen Sie uns, etwas zu bewegen!
ÜBERBLICK
Wir suchen einen Senior Software Engineer in Test mit Spezialisierung auf ML/KI-Qualität, einschließlich Automatisierung für die Modellevaluierung, LLM-gestützte Testgenerierung und Validierung von KI-gestützten Arbeitsabläufen. Die Rolle umfasst die Leitung der Qualitätsstrategie und die Entwicklung von Automatisierungs-Frameworks. Sie steuern zudem die Implementierung für komplexe, funktionsübergreifende, machine learning-basierte Produkte und Dienste. Diese Rolle beinhaltet mehr als nur Testentwicklung. Sie leiten Qualitätsinitiativen von Anfang bis Ende, stellen sicher, dass Teams synchronisiert bleiben, Abhängigkeiten verwaltet werden und Releases zuverlässig bereitgestellt werden. Sie arbeiten eng mit ML-, Engineering-, Produkt- und Infrastrukturteams zusammen. Sie gestalten, wie Qualität aufgebaut, überwacht und erweitert wird, während Sie eingebettete QE-Bemühungen innerhalb von Projekten leiten.
WAS SIE TUN WERDEN
- Definieren und Umsetzen von Qualitätsstrategien, Testplänen und Automatisierungsabdeckung für ML-gestützte Dienste und Plattformkomponenten.
- Nutzung von LLMs und anderen KI-gestützten Techniken zur Generierung, Erweiterung und Pflege hochwertiger Testfälle für ML-gestützte Arbeitsabläufe.
- Entwurf szenariobasierter Testsuiten für KI-Funktionen, einschließlich gegnerischer Prompts (Adversarial Prompts), Randfällen, mehrdeutigen Eingaben und unterrepräsentierten Benutzerszenarien.
- Leitung von QE-Bemühungen für funktionsübergreifende Projekte, Steuerung der Risikobewertung, Abhängigkeitsmanagement und Release-Bereitschaft.
- Entwurf, Entwicklung und Wartung skalierbarer Automatisierungs-Frameworks für backend-Dienste, APIs und ML-Inferenzsysteme unter Verwendung von Python und/oder Java.
- Aufbau automatisierter Validierungen für ML- und LLM-Ausgaben, einschließlich Ranking-Verhalten, Score-Verteilungen, Prompt/Antwort-Qualität, Halluzinationsindikatoren und probabilistischer Modellevaluierung.
- Debugging von Testfehlern, Service-Anomalien, Modellinkonsistenzen und KI-Verhaltensregressionen, um Grundursachen zu identifizieren und Lösungen voranzutreiben.
- Durchführung von funktionalen Tests, Integrationstests, Regressionstests, API-Tests, End-to-End-Tests, Leistungstests und Zuverlässigkeitstests für verteilte Systeme.
- Verbesserung der Automatisierungszuverlässigkeit, Reduzierung von Instabilität (Flakiness) und Optimierung der Ausführungseffizienz.
- Zusammenarbeit mit Engineering- und ML-Teams zur Integration automatisierter Tests in CI/CD-Pipelines und Release-Workflows.
- Teamübergreifende Zusammenarbeit zur Etablierung skalierbarer Qualitätsstandards, Tools und Richtlinien.
ERFORDERLICHE QUALIFIKATIONEN
- Bachelor-Abschluss in Informatik oder gleichwertig
- 5+ Jahre Erfahrung als SDET oder QE-Ingenieur mit Fokus auf backend und verteilte Systeme.
- Erfahrung in der Nutzung von LLMs zur Generierung, Transformation und Priorisierung von Testfällen für KI-gestützte Erlebnisse.
- Erfahrung mit KI-Evaluierungstools, Prompt-Evaluierungs-Frameworks, Modellüberwachung oder Human-in-the-Loop-Review-Workflows.
- Fundierte Erfahrung im Testen von RESTful APIs, Microservices und verteilten Architekturen.
- Kenntnisse in Python, Java, JS oder ähnlichen Sprachen für die Automatisierungsentwicklung.
- Praktische Erfahrung mit Automatisierungs-Frameworks wie pytest, JUnit, Selenium, Playwright, Cypress oder Appium.
- Erfahrung mit CI/CD-Systemen und Test-Pipelines (Jenkins, GitHub Actions, etc.).
- Erfahrung mit Cloud- und Container-Technologien (AWS, GCP, Kubernetes, Docker).
- Vertrautheit mit Datenbanken, Überwachungs- und Observability-Tools.
- Fundiertes Verständnis von SDLC, agilen Methoden und Release-Prozessen.
- Ausgezeichnete Problemlösungs-, Debugging- und Kommunikationsfähigkeiten.
BEVORZUGTE QUALIFIKATIONEN
- Erfahrung in der Validierung von ML-Ausgaben mittels statistischer Analyse oder szenariobasierter Testansätze.
- Vertrautheit mit ML-Infrastruktur, Daten-Pipelines oder Modell-Serving-Plattformen (Seldon, KServe, Ray Serve, etc.).
- Frühere Arbeit in den Bereichen Content-Moderation ML, Sicherheit, Betrugserkennung oder Adversarial ML.
- Erfahrung im Testen von hochskalierbaren Online-Diensten mit geringer Latenz.
- Erfahrung mit Databricks oder ähnlichen ML-Plattform-Tools.
- Vertrautheit mit Node.js, React oder modernen frontend-Technologien.
- Erfahrung im Testen von Mobil-, Konsolen- oder anderen Nicht-PC-Plattformen.
WAS SIE AUSZEICHNET
- Starke Kombination aus Automatisierungstechnik und Verantwortungsbewusstsein für die Bereitstellung.
- Fähigkeit, Qualität über komplexe funktionsübergreifende Initiativen hinweg voranzutreiben.
- Praktisches Verständnis dafür, wie man nicht-deterministische KI-Systeme testet und Modellvarianz von Qualitätsregressionen trennt.
- Nachgewiesene Fähigkeiten im Risikomanagement und in der Koordinierung von Abhängigkeiten.
- Fähigkeit, Engineering-Teams zu beeinflussen und Qualitätsrichtlinien zu fördern.
- Leidenschaft für skalierbare, zuverlässige und wartbare Automatisierungssysteme.
Die geschätzte Grundgehaltsspanne für diese Rolle ist unten aufgeführt.
$183,000—$274,600 USD
Bitte beachten Sie, dass Sony Interactive Entertainment in der Angebotsphase für alle neuen Mitarbeiter Hintergrundüberprüfungen durchführt (die für einige Rollen auch strafrechtliche Hintergrundüberprüfungen umfassen können) und personenbezogene Daten verarbeiten muss, um diese Überprüfungen zu unterstützen.
Bitte lesen Sie unsere Datenschutzhinweise für Bewerber playstation.com/legal/careers-privacy-notice/ für weitere Informationen darüber, welche personenbezogenen Daten wir erheben, wie wir sie verwenden, mit wem wir sie teilen und welche Datenschutzrechte Sie haben.
Erklärung zur Chancengleichheit:
Sony ist ein Arbeitgeber, der Chancengleichheit fördert. Alle Personen werden bei der Einstellung ohne Rücksicht auf Geschlecht (einschließlich Geschlechtsidentität, Geschlechtsausdruck und Geschlechtsangleichung), Rasse (einschließlich Hautfarbe, Nationalität, ethnischer oder nationaler Herkunft), Religion oder Weltanschauung, Familienstand oder Lebenspartnerschaft, Behinderung, Alter, sexuelle Orientierung, Schwangerschaft, Mutterschaft oder Elternstatus, Gewerkschaftszugehörigkeit oder Mitgliedschaft in einer anderen gesetzlich geschützten Kategorie berücksichtigt.
Wir bemühen uns, ein integratives Umfeld zu schaffen, Mitarbeiter zu stärken und Vielfalt zu fördern. Wir ermutigen jeden, sich zu bewerben.
Sony Interactive Entertainment ist ein Arbeitgeber, der faire Chancen bietet, und qualifizierte Bewerber mit Vorstrafen werden bei der Einstellung berücksichtigt.
Bei SIE berücksichtigen wir mehrere Faktoren bei der Festlegung der Grundgehaltsspanne für jede Rolle, einschließlich wettbewerbsfähiger Benchmarking-Daten für den Markt und den geografischen Standort.
Bitte beachten Sie, dass die Grundgehaltsspanne im Einklang mit unserer Richtlinie für hybrides Arbeiten variieren kann und das individuelle Grundgehalt auf der Grundlage berufsbezogener Faktoren bestimmt wird, zu denen Wissen, Fähigkeiten, Erfahrung und Standort gehören können.
Darüber hinaus hat diese Rolle Anspruch auf das erstklassige Leistungspaket von SIE, das Kranken-, Zahn- und Augenversicherung, eine Arbeitgeberbeteiligung bei der 401(k)-Altersvorsorge, bezahlten Urlaub, ein Wellnessprogramm und begehrte Mitarbeiterrabatte für Sony-Produkte umfasst. Diese Rolle kann auch für ein Bonuspaket in Frage kommen. Klicken Sie hier careers.playstation.com/benefits, um mehr zu erfahren.
Mehr Möglichkeiten mit einem Profil
Für mehr Stellen berücksichtigt werden, ohne den ganzen Prozess zu wiederholen? Erstellen Sie Ihr Profil, damit Unternehmen auf Nort Sie finden.
Profil erstellen