Estados Unidos
Be Structured Technology Group
PlayStation Global
Ingeniero de desarrollo de software de pruebas sénior, IA/ML
Estados Unidos
San Mateo, California, United States
PythonJavaReactNode.jsAWSGCPDockerKubernetes
Traducción automática. Consulta el original.
¿Por qué Sony Interactive Entertainment?
Sony Interactive Entertainment no es solo el mejor lugar para jugar, también es el mejor lugar para trabajar. Sony Interactive Entertainment (SIE) es la empresa detrás de la marca PlayStation. Como filial de Sony Group Corporation, formamos parte de un orgulloso legado de innovación y excelencia. SIE es una empresa tecnológica dinámica que ofrece hardware y servicios de red de vanguardia a más de 100 millones de personas, y un líder en entretenimiento, hogar de algunas de las propiedades intelectuales (IP) más queridas y reconocibles del mundo. Nuestro papel en SIE es crear y fomentar las experiencias bajo la marca PlayStation, un nombre sinónimo de excelencia en el entretenimiento y creatividad.
INGENIERO DE DESARROLLO DE SOFTWARE DE PRUEBAS SÉNIOR, ML/AI
En SIE, creemos en hacer que el juego sea más seguro para todos. Dentro de nuestro equipo de Seguridad de la Información, protegemos a nuestra gente, plataformas y productos con soluciones inteligentes, escalables y bien pensadas. Nuestra misión es proporcionar información clara y procesable sobre riesgos y seguridad que guíe a la empresa y permita experiencias de juego increíbles.
Estamos creando un equipo que prospera gracias a la colaboración, la curiosidad y la entrega de valor real. ¡Ven a ayudarnos a marcar la diferencia!
DESCRIPCIÓN GENERAL
Estamos contratando a un ingeniero de software de pruebas sénior especializado en la calidad de ML/AI, incluyendo la automatización para la evaluación de modelos, la generación de pruebas asistida por LLM y la validación de flujos de trabajo basados en IA. El puesto incluye guiar la estrategia de calidad y desarrollar marcos de automatización. También gestionarás la implementación de productos y servicios complejos y multifuncionales basados en machine learning. Este puesto implica más que el desarrollo de pruebas. Liderarás iniciativas de calidad de principio a fin, asegurando que los equipos se mantengan sincronizados, que las dependencias se gestionen y que las versiones se entreguen con confianza. Trabajarás en estrecha colaboración con los equipos de ML, ingeniería, producto e infraestructura. Darás forma a cómo se construye, supervisa y amplía la calidad mientras lideras los esfuerzos de QE integrados dentro de los proyectos.
QUÉ HARÁS
- Definir y completar estrategias de calidad, planes de prueba y cobertura de automatización para servicios basados en ML y componentes de plataforma.
- Utilizar LLMs y otras técnicas asistidas por IA para generar, ampliar y mantener casos de prueba de alto valor para flujos de trabajo basados en ML.
- Diseñar conjuntos de pruebas basados en escenarios para funciones de IA, incluyendo prompts adversarios, casos extremos, entradas ambiguas y escenarios de usuario subrepresentados.
- Liderar los esfuerzos de QE para proyectos multifuncionales, impulsando la evaluación de riesgos, la gestión de dependencias y la preparación para el lanzamiento.
- Diseñar, desarrollar y mantener marcos de automatización escalables para servicios de backend, APIs y sistemas de inferencia de ML utilizando Python y/o Java.
- Construir validación automatizada para salidas de ML y LLM, incluyendo comportamiento de clasificación, distribuciones de puntuación, calidad de prompt/respuesta, indicadores de alucinación y evaluación de modelos probabilísticos.
- Depurar fallos de prueba, anomalías de servicio, inconsistencias de modelos y regresiones de comportamiento de IA para identificar las causas raíz e impulsar la resolución.
- Realizar pruebas funcionales, de integración, de regresión, API, de extremo a extremo, de rendimiento y de fiabilidad para sistemas distribuidos.
- Mejorar la fiabilidad de la automatización, reducir la inestabilidad y optimizar la eficiencia de la ejecución.
- Colaborar con los equipos de ingeniería y ML para integrar las pruebas automatizadas en los pipelines de CI/CD y los flujos de trabajo de lanzamiento.
- Colaborar entre equipos para establecer estándares de calidad, herramientas y directrices escalables.
CUALIFICACIONES REQUERIDAS
- Licenciatura en Informática o equivalente
- 5+ años de experiencia como SDET o ingeniero de QE centrado en backend y sistemas distribuidos.
- Experiencia en el uso de LLMs para generar, transformar y priorizar casos de prueba para experiencias basadas en IA.
- Experiencia con herramientas de evaluación de IA, marcos de evaluación de prompts, supervisión de modelos o flujos de trabajo de revisión humana.
- Sólida experiencia en pruebas de APIs RESTful, microservicios y arquitecturas distribuidas.
- Dominio de Python, Java, JS o lenguajes similares para el desarrollo de automatización.
- Experiencia práctica con marcos de automatización como pytest, JUnit, Selenium, Playwright, Cypress o Appium.
- Experiencia con sistemas de CI/CD y pipelines de prueba (Jenkins, GitHub Actions, etc.).
- Experiencia con tecnologías de nube y contenedores (AWS, GCP, Kubernetes, Docker).
- Familiaridad con bases de datos, supervisión y herramientas de observabilidad.
- Sólida comprensión del SDLC, metodologías Agile y procesos de lanzamiento.
- Excelentes habilidades de resolución de problemas, depuración y comunicación.
CUALIFICACIONES PREFERIDAS
- Experiencia en la validación de salidas de ML mediante análisis estadístico o enfoques de prueba basados en escenarios.
- Familiaridad con la infraestructura de ML, pipelines de datos o plataformas de servicio de modelos (Seldon, KServe, Ray Serve, etc.).
- Trabajo previo en ML de moderación de contenido, seguridad, detección de fraudes o ML adversario.
- Experiencia en pruebas de servicios en línea de gran escala y baja latencia.
- Experiencia con Databricks o herramientas de plataforma de ML similares.
- Familiaridad con Node.js, React o tecnologías modernas de frontend.
- Experiencia en pruebas de plataformas móviles, consolas u otras plataformas que no sean PC.
QUÉ TE HACE DESTACAR
- Sólida combinación de ingeniería de automatización y propiedad de la entrega.
- Capacidad para impulsar la calidad en iniciativas multifuncionales complejas.
- Comprensión práctica de cómo probar sistemas de IA no deterministas y separar la varianza del modelo de las regresiones de calidad.
- Habilidades demostradas de gestión de riesgos y coordinación de dependencias.
- Capacidad para influir en los equipos de ingeniería y promover directrices de calidad.
- Pasión por los sistemas de automatización escalables, fiables y mantenibles.
El rango salarial base estimado para este puesto se indica a continuación.
$183,000—$274,600 USD
Ten en cuenta que Sony Interactive Entertainment realiza verificaciones de antecedentes en la etapa de oferta para todos los nuevos empleados (lo que puede incluir verificaciones de antecedentes penales para algunos puestos) y necesitará procesar información personal para respaldar estas verificaciones.
Consulta nuestro Aviso de Privacidad para Candidatos playstation.com/legal/careers-privacy-notice/ para obtener más información sobre qué información personal recopilamos, cómo la usamos, con quién la compartimos y tus derechos de protección de datos.
Declaración de Igualdad de Oportunidades:
Sony es un empleador que ofrece igualdad de oportunidades. Todas las personas recibirán consideración para el empleo sin distinción de género (incluida la identidad de género, la expresión de género y la reasignación de género), raza (incluido el color, la nacionalidad, el origen étnico o nacional), religión o creencia, estado civil o de pareja de hecho, discapacidad, edad, orientación sexual, embarazo, maternidad o estado parental, afiliación sindical o pertenencia a cualquier otra categoría protegida legalmente.
Nos esforzamos por crear un entorno inclusivo, empoderar a los empleados y fomentar la diversidad. Animamos a todos a responder.
Sony Interactive Entertainment es un empleador que ofrece igualdad de oportunidades y los solicitantes cualificados con antecedentes de arresto y condena serán considerados para el empleo.
En SIE, consideramos varios factores al establecer el rango salarial base de cada puesto, incluyendo los datos de evaluación comparativa competitiva para el mercado y la ubicación geográfica.
Ten en cuenta que el rango salarial base puede variar de acuerdo con nuestra política de trabajo híbrido y el salario base individual se determinará en función de factores relacionados con el puesto, que pueden incluir conocimientos, habilidades, experiencia y ubicación.
Además, este puesto es elegible para el paquete de beneficios de primer nivel de SIE que incluye atención médica, dental, visión, 401(k) con contrapartida, tiempo libre remunerado, programa de bienestar y descuentos para empleados en productos Sony. Este puesto también puede ser elegible para un paquete de bonificación. Haz clic aquí careers.playstation.com/benefits para obtener más información.
Más oportunidades con un solo perfil
¿Quieres optar a más puestos sin repetir todo el proceso? Crea tu perfil para que te encuentren las empresas que usan Nort.
Crear mi perfil