TSMC
DRW
Desenvolvedor(a) de Dados
Sobre a oportunidade
DRW é uma empresa de trading diversificada com mais de 3 décadas de experiência, unindo tecnologia sofisticada e pessoas excepcionais para operar em mercados ao redor do mundo. Valorizamos a autonomia e a capacidade de agir rapidamente para capturar oportunidades, por isso operamos com capital próprio e negociamos por nossa conta e risco.
Com sede em Chicago e escritórios nos EUA, Canadá, Europa e Ásia, negociamos uma variedade de classes de ativos, incluindo Renda Fixa, ETFs, Ações, Câmbio, Commodities e Energia em todos os principais mercados globais. Também aproveitamos nossa expertise e tecnologia para expandir para três estratégias não tradicionais: imóveis, venture capital e criptoativos.
Operamos com respeito, curiosidade e mente aberta. As pessoas que prosperam aqui compartilham nossa crença de que não é apenas o que fazemos que importa – é como fazemos. A DRW é um lugar de altas expectativas, integridade, inovação e disposição para desafiar o consenso.
Estamos procurando um(a) Desenvolvedor(a) de Dados para se juntar à nossa equipe de Estratégias Sistemáticas de IA e Multi-Ativos. Esta equipe constrói ferramentas e soluções baseadas em IA e ML que capacitam equipes em toda a empresa e apoiam pesquisadores de IA. Você construirá pipelines de dados para sistemas RAG, otimizará fluxos de trabalho de embedding e arquitetará soluções escaláveis para gerenciar dados analíticos, relacionais, estruturados e não estruturados.
Responsabilidades
- Projetar e construir pipelines de dados para sistemas RAG, incluindo ingestão de documentos, chunking, geração de embeddings e armazenamento vetorial.
- Construir pipelines de ingestão para fontes de dados estruturados e não estruturados em um data lake centralizado, garantindo que os dados sejam limpos, normalizados e acessíveis para cargas de trabalho de análise, pesquisa e IA.
- Desenvolver fluxos de trabalho de processamento de dados para preparar e otimizar conjuntos de dados para cargas de trabalho de fine-tuning e inferência.
- Construir frameworks de monitoramento e avaliação para medir a qualidade da recuperação, latência e desempenho do sistema.
- Colaborar com engenheiros de ML para otimizar formatos de dados e padrões de armazenamento para inferência acelerada por GPU.
- Implementar estratégias de caching e sistemas de versionamento de dados para suportar a inferência eficiente de modelos.
- Implantar e gerenciar bancos de dados vetoriais, serviços de embedding e pipelines de processamento de dados.
- Impulsionar iniciativas para melhorar a qualidade dos dados, reduzir a latência e aumentar a precisão dos sistemas de recuperação.
- Aprender continuamente e manter-se atualizado com tecnologias emergentes e melhores práticas em engenharia de dados e IA.
- Contribuir proativamente com ideias para novas ferramentas, melhorias de processos e adoção de tecnologia que impulsionem a equipe.
Requisitos
- Bacharelado ou Mestrado em Ciência da Computação, Engenharia de Dados ou área relacionada.
- 2-5 anos construindo sistemas e pipelines de dados em ambientes de produção.
- Sólida experiência com arquiteturas RAG, incluindo bancos de dados vetoriais (Milvus, ChromaDB, Pinecone, Weaviate ou Qdrant).
- Proficiência em Python com experiência em plataformas de orquestração baseadas em DAG (Airflow, Dagster, Prefect ou similar).
- Experiência prática com modelos de embedding e sistemas de busca semântica.
- Experiência com frameworks de processamento de dados distribuídos (Apache Spark, Ray ou Dask).
- Compreensão de técnicas de otimização de inferência de LLM e engenharia de prompts.
- Familiaridade com Docker, containerização e plataformas de orquestração.
- Forte domínio das melhores práticas de engenharia de dados, incluindo modelagem de dados, padrões ETL/ELT e qualidade de dados.
Para mais informações sobre as atividades de processamento da DRW e nosso uso de dados de candidatos a emprego, por favor, consulte nosso Aviso de Privacidade em drw.com/privacy-notice.
Residentes da Califórnia, por favor, revisem o Aviso de Privacidade da Califórnia para informações sobre certos direitos legais em drw.com/california-privacy-notice.
[#LI-KS1]
