The MITRE Corporation
Apple
Especialista en Evaluación de ML, Datos Humanos
Sobre la oportunidad
En Apple, no solo creamos productos, creamos experiencias impulsadas por datos de clase mundial.
El equipo de IA Centrada en el Humano dentro de Ingeniería de Servicios de Apple busca un Especialista en Evaluación de ML, Datos Humanos para unirse a nuestra división de Calidad y Operaciones de Datos, para liderar operaciones complejas con múltiples partes interesadas que se especializan en la recopilación, curación, anotación y esfuerzos de evaluación humana de datos en Apple Music, App Store, TV+, Podcasts y Books.
El candidato ideal aporta una combinación poco común de profundidad técnica y habilidades de ejecución de programas.
Te preocupa profundamente la calidad de los datos y la alineación humana, tienes un enfoque creativo y sistemático para encontrar y solucionar problemas, y encuentras motivación en un trabajo de amplio alcance cuyo impacto se refleja en las experiencias cotidianas de Apple.
El candidato ideal aporta una combinación poco común de profundidad técnica y habilidades de ejecución de programas.
Te preocupa profundamente la calidad de los datos y la alineación humana, tienes un enfoque creativo y sistemático para encontrar y solucionar problemas, y encuentras motivación en un trabajo de amplio alcance cuyo impacto se refleja en las experiencias cotidianas de Apple.
DESCRIPCIÓN
En este puesto, serás responsable de la estrategia operativa y la mejora continua de programas de datos humanos multilingües a gran escala, desde el diseño de estructuras de incorporación que desarrollen progresivamente la calibración del anotador, hasta el análisis de patrones de comportamiento del anotador para identificar dónde la automatización puede descargar decisiones de bajo juicio, hasta la aplicación de marcos de calidad que cierren el ciclo entre la dificultad del anotador y el rediseño de la tarea.
Identificarás dónde el juicio humano es esencial y dónde podría dirigirse mejor, y luego construirás las estructuras, la automatización y los sistemas de retroalimentación que permitan a los anotadores centrar su energía cognitiva donde más importa.
Dado que este trabajo abarca ingeniería, ciencia de datos, investigación, adquisiciones y legal, una parte fundamental del puesto es servir como nexo de unión entre equipos que poseen una parte de este espacio, alineándose en estándares compartidos, identificando lagunas y asegurando que las ideas de la capa de anotación informen las decisiones previas sobre el diseño de tareas y las herramientas.
Aportarás una perspectiva sobre las mejores prácticas de datos humanos y la traducirás en enfoques escalables y centrados en el ser humano que hagan que las funciones de IA generativa sean más seguras y fiables.
Te sentirás cómodo diseñando e implementando canalizaciones de datos sofisticadas por la mañana y, a continuación, pasarás sin problemas a presentar estrategias integrales de rectificación de calidad a las partes interesadas por la tarde.
En este puesto, serás responsable de la estrategia operativa y la mejora continua de programas de datos humanos multilingües a gran escala, desde el diseño de estructuras de incorporación que desarrollen progresivamente la calibración del anotador, hasta el análisis de patrones de comportamiento del anotador para identificar dónde la automatización puede descargar decisiones de bajo juicio, hasta la aplicación de marcos de calidad que cierren el ciclo entre la dificultad del anotador y el rediseño de la tarea.
Identificarás dónde el juicio humano es esencial y dónde podría dirigirse mejor, y luego construirás las estructuras, la automatización y los sistemas de retroalimentación que permitan a los anotadores centrar su energía cognitiva donde más importa.
Dado que este trabajo abarca ingeniería, ciencia de datos, investigación, adquisiciones y legal, una parte fundamental del puesto es servir como nexo de unión entre equipos que poseen una parte de este espacio, alineándose en estándares compartidos, identificando lagunas y asegurando que las ideas de la capa de anotación informen las decisiones previas sobre el diseño de tareas y las herramientas.
Aportarás una perspectiva sobre las mejores prácticas de datos humanos y la traducirás en enfoques escalables y centrados en el ser humano que hagan que las funciones de IA generativa sean más seguras y fiables.
Te sentirás cómodo diseñando e implementando canalizaciones de datos sofisticadas por la mañana y, a continuación, pasarás sin problemas a presentar estrategias integrales de rectificación de calidad a las partes interesadas por la tarde.
CALIFICACIONES MÍNIMAS
- Título de Grado o superior en Ciencias Cognitivas, Lingüística o un campo relacionado que incluya un componente experimental o empírico.
- 4+ años de experiencia definiendo y liderando programas de datos humanos inter-equipos para IA/ML, incluyendo operaciones de anotación, marcos de calidad y estrategias de evaluación, dentro de un entorno de NLP/NLU o IA generativa.
- Dominio de lenguajes de programación y datos (Python, R, SQL) para procesar, analizar, consultar grandes conjuntos de datos, extraer información, automatizar tareas y monitorizar el rendimiento del programa.
- Experiencia práctica en el diseño y la gestión de iniciativas de recopilación, anotación y evaluación de datos con intervención humana (0→1), incluyendo la conducción e incorporación de flujos de trabajo agénticos para mejorar la calidad y la escalabilidad.
- Experiencia trabajando con diversos tipos de datos (por ejemplo, voz, texto, multimodal) en varios idiomas.
- Experiencia en la gestión de la calidad de la anotación de datos de extremo a extremo, incluyendo la capacidad de desarrollar controles estadísticos de procesos y métricas de calidad de datos.
- Familiaridad con las prácticas de manejo de datos que preservan la privacidad y los marcos de cumplimiento.
- Éxito demostrado en la optimización de canalizaciones y flujos de trabajo de datos para mejorar la calidad, reducir el tiempo de entrega y escalar las operaciones.
- Experiencia trabajando interfuncionalmente con ingeniería, ciencia de datos, legal, privacidad y proveedores externos.
CALIFICACIONES PREFERIDAS
- Máster o superior en Ciencias Cognitivas, Lingüística o un campo relacionado que incluya un componente experimental o empírico.
- 2+ años de experiencia liderando la estrategia de datos para el desarrollo y la evaluación de IA de vanguardia, con experiencia en metodologías de alineación humana y sistemas GenAI agénticos.
- Experiencia en la gestión de socios proveedores o de fuerza laboral externa a escala.
- Familiaridad con los principios de Seguridad de la IA y IA Responsable, incluyendo experiencia en su aplicación a flujos de trabajo de recopilación o anotación de datos.
- Sólidas habilidades organizativas y mentalidad orientada a la ejecución; capacidad para equilibrar la atención al detalle con la visión general en un entorno donde el alcance y las prioridades del programa evolucionan rápidamente.
- Excelentes habilidades de comunicación escrita y verbal; capacidad para traducir conceptos técnicos para partes interesadas no técnicas.
