Research Scientist – Foundation Models & Sequence Modeling

Integrity Recruitment Group · Barueri, São Paulo, Brazil

**Sobre a oportunidade:** Estamos buscando uma pessoa **Pesquisadora sênior em Deep Learning** para participar da construção de um modelo fundacional próprio, desenvolvido a partir de grandes volumes de dados transacionais, sequenciais e heterogêneos. O desafio envolve investigar como transformar históricos de eventos em representações úteis para modelos de inteligência artificial, explorando estratégias de aprendizado auto\-supervisionado, pré\-treinamento e arquiteturas Transformer. É uma oportunidade para quem atua com pesquisa aplicada, tem profundidade técnica e deseja participar da construção de soluções proprietárias, com autonomia para formular hipóteses, desenvolver modelos e conduzir experimentos. **ATENÇÃO!** Modelo de Trabalho Hibrido/Remoto – Barueri, SP **Haverá a possibilidade de negociar as idas ao escritório em função do projeto, mesmo que você seja de outro Estado ou more em outro País** **Responsabilidades:** * Pesquisar e desenvolver estratégias de representação e pré\-treinamento auto\-supervisionado para dados sequenciais e heterogêneos. * Projetar e implementar arquiteturas Transformer para sequências longas, explorando diferentes objetivos de aprendizagem e mecanismos de atenção. * Desenvolver estratégias de tokenização e codificação de dados não textuais, temporais e tabulares. * Conduzir experimentos, ablações e estudos de escala, avaliando o impacto de diferentes escolhas de modelagem. * Avaliar a qualidade das representações aprendidas e sua transferência para diferentes tarefas. * Extrair, preparar e explorar dados diretamente de data lakes e fontes transacionais. * Documentar experimentos, decisões e resultados de forma reproduzível. **Precisamos de alguém com:** * **Mestrado e/ou Doutorado completo ou cursando** em Computação, Estatística, Matemática, Física, Engenharia ou áreas correlatas, ou experiência equivalente comprovada em pesquisa. * Experiência profunda em Deep Learning, aprendizado de representações e pré\-treinamento de modelos. * Experiência prática com arquiteturas Transformer e aprendizado auto\-supervisionado para dados sequenciais. * Domínio de Python e PyTorch, com experiência no ecossistema Hugging Face ou ferramentas equivalentes. * Experiência na extração e preparação de dados utilizando Spark e SQL. * Conhecimento de estatística aplicada à experimentação e avaliação de modelos. * Capacidade de desenvolver código limpo, testável e reproduzível. * Inglês técnico fluente. **Diferenciais** * Experiência com modelos fundacionais e treinamento de modelos de larga escala. * Conhecimento de técnicas de atenção eficiente e modelagem de sequências longas. * Experiência com tokenização de dados tabulares, temporais ou multimodais. * Conhecimento de ferramentas como DeepSpeed, Megatron, NeMo, Triton ou RAPIDS. * Experiência com AWS e Databricks. * Publicações científicas, contribuições open source ou projetos relevantes de pesquisa aplicada. **O que esperamos de você:** * Comunicação estruturada baseada em fatos e dados * Pragmatismo para resolução de problemas * Perfil colaborativo para apoiar o time na construção de soluções * Familiaridade com metodologias ágeis * Indignação construtiva **Remuneração \& Benefícios:** * Modelo de contrato CLT * Vale Refeição e Alimentação * Convênio médico e odontológico * Vale Mobilidade * Seguro de Vida * Previdência Privada * Auxílio Creche ou Babá * Wellhub ou TotalPass **Conheça o nosso processo** O processo seletivo se inicia na candidatura. O tempo do processo é flexível, mas não se preocupe, nosso time dedicado a *candidate experience* está preparado para proporcionar a melhor experiência para você. Analisamos todos os perfis com atenção e sempre enviamos feedbacks, independente da etapa da candidatura. Além disso, todas as instruções são enviadas por e\-mail e/ou WhatsApp, e os feedbacks acontecem em tempo real.