HEARTLAND BUSINESS SYSTEMS LLC
Meta
Cientista de Pesquisa em IA, Pesquisa de Dados de Texto - MSL FAIR
Sobre a oportunidade
A Meta está em busca de cientistas de pesquisa em IA para nos ajudar a construir a base de dados para os modelos de linguagem grande mais avançados da Meta. Estamos procurando pesquisadores com expertise em LLM para se juntarem a nós no trabalho com dados em escala e para superarmos os limites atuais de dados. Nossa equipe contribui para a curadoria de dados em todas as etapas do desenvolvimento de LLM (pré-treinamento, treinamento intermediário, pós-treinamento) e em todos os domínios/modalidades (por exemplo, web, código, agente, multilingue). Enfrentamos os desafios mais complexos em escala de trilhões, incluindo curadoria de dados orgânicos, geração de dados sintéticos, dados de agentes e interações, e paradigmas de fronteira que redefinem o que é possível. Com base nos Laboratórios de Superinteligência da Meta (MSL) dentro da Organização de Pesquisa Fundamental em IA (FAIR), você contribuirá diretamente para os modelos de fronteira da Meta, como o Llama, tendo a oportunidade de colaborar com pesquisadores e engenheiros em toda a MSL.
Responsabilidades
- Colaborar com equipes multifuncionais para desenvolver os próximos modelos fundamentais da Meta
- Avançar nossa compreensão da pesquisa de dados, como superar barreiras de dados e como criar dados sintéticos da melhor forma
- Melhorar fundamentalmente nossa velocidade de dados em fluxos de trabalho e projetos, contribuindo para o avanço das ferramentas de dados
- Arquitetar sistemas e pipelines de curadoria de dados eficientes e escaláveis
- Executar projetos de alta prioridade em curadoria de dados de pré-treinamento, treinamento intermediário ou pós-treinamento
- Aplicar expertise especializada em dados de agentes, dados sintéticos, dados de raciocínio, web parser, dados de codificação, leis de escalonamento de dados ou otimização de datamix
- Liderar projetos técnicos complexos de ponta a ponta
Qualificações Mínimas
- Bacharelado em Ciência da Computação, Engenharia da Computação, área técnica relevante ou experiência prática equivalente
- Doutorado em Ciência da Computação ou área técnica relacionada
- 2+ anos de experiência em pesquisa na indústria em LLM/NLP ou modelos de IA/ML relacionados
- Experiência como líder técnico formal, liderando grandes iniciativas técnicas com impacto multifuncional e/ou influenciando a estratégia em várias equipes
- Experiência prática com curadoria de dados de pré-treinamento ou treinamento intermediário para grandes modelos fundamentais e experiência trabalhando com dados orgânicos, sintéticos, de agentes ou de raciocínio para LLMs
- Pesquisas publicadas em conferências líderes revisadas por pares (por exemplo, NeurIPS, ICML, ICLR, ACL, EMNLP) e/ou influência significativa demonstrada na indústria na área de IA
Qualificações Preferenciais
- Experiência de trabalho com modelos de linguagem grande de qualidade de fronteira/estado da arte
- Múltiplas publicações como primeiro autor em conferências líderes revisadas por pares (por exemplo, NeurIPS, ICML, ICLR, ACL, EMNLP)
- Experiência prática com frameworks de modelagem como PyTorch
- Experiência prática em SQL e manuseio de dados em larga escala, com familiaridade em frameworks como Spark e Hive
$184,000/ano a $257,000/ano + bônus + ações + benefícios
