Engenheiro Senior de Dados/ML

Descrição

Esta é uma oportunidade de trabalho em regime integral remoto para uma estrela **Engenheiro(a) de Dados/ML da América Latina.** A IDT (www.idt.net) é uma empresa norte-americana de telecomunicações fundada em 1990, com sede em Nova Jersey. Hoje, é líder do setor em serviços pré-pagos de comunicação e pagamento, além de ser uma das maiores operadoras mundiais de voz internacional. Estamos listados na NYSE, empregamos mais de 1300 pessoas em mais de 20 países e geramos receitas superiores a $1\.5 bilhão. Estamos buscando um Engenheiro(a) de Dados/ML qualificado(a) para integrar nossa equipe de BI e desempenhar um papel ativo no projeto, construção e manutenção do pipeline de dados de ponta a ponta, bem como na arquitetura e no design que sustentam nosso data warehouse, aplicações orientadas por LLM e BI baseado em IA. **Se você procura uma empresa que lhe ofereça a máxima flexibilidade na escolha do local de trabalho, essa oportunidade é para você!** ### **Responsabilidades:** * Projetar, desenvolver e manter pipelines de dados escaláveis para suportar ingestão, transformação e entrega em repositórios centralizados de características (feature stores), fluxos de treinamento de modelos e serviços de inferência em tempo real. * Construir e otimizar fluxos de trabalho para extrair, armazenar e recuperar representações semânticas de dados não estruturados, habilitando padrões avançados de busca e recuperação. * Projetar e implementar soluções leves de análise e dashboards que ofereçam experiências de consulta em linguagem natural e insights impulsionados por IA. * Definir e executar processos para gerenciar técnicas de engenharia de prompts, fluxos de orquestração e rotinas de ajuste fino de modelos, visando alimentar interfaces conversacionais. * Supervisionar bancos de dados vetoriais e desenvolver metodologias eficientes de indexação para suportar fluxos de trabalho de geração aumentada por recuperação (RAG). * Colaborar com partes interessadas em dados para coletar requisitos relacionados a iniciativas com modelos de linguagem e traduzi-los em soluções escaláveis. * Criar e manter documentação abrangente de todos os processos de dados, fluxos de trabalho e rotinas de implantação de modelos. * Demonstrar disposição para se manter atualizado(a) e aprender novas metodologias emergentes em engenharia de dados, MLOps e operações com LLM. ### **Requisitos:** * 8 anos ou mais de experiência como Engenheiro(a) de Dados, com pelo menos 2 anos focados em MLOps. * Excelentes habilidades de comunicação em inglês. * Habilidades eficazes de comunicação oral e escrita com a equipe de BI e com a comunidade de usuários. * Experiência comprovada no uso de Python para tarefas de engenharia de dados, incluindo transformação, manipulação avançada de dados e processamento em larga escala. * Profundo entendimento de bancos de dados vetoriais e arquiteturas RAG, bem como sua aplicação em fluxos de recuperação semântica. * Capacidade comprovada de integrar frameworks de LLM de código aberto aos fluxos de trabalho de engenharia de dados, abrangendo treinamento completo de modelos, personalização e inferência escalável. * Experiência com plataformas em nuvem como AWS ou Azure Machine Learning para implantações gerenciadas de LLM. * Experiência prática com tecnologias de big data, incluindo Apache Spark, Hadoop e Kafka, para processamento distribuído e ingestão de dados em tempo real. * Experiência no projeto de pipelines complexos de dados que extraem informações de fontes RDBMS, JSON, APIs e arquivos planos. * Habilidades comprovadas em programação SQL e PL/SQL, com domínio avançado em metodologias de Business Intelligence e data warehouse, além de experiência prática em um ou mais sistemas de bancos de dados relacionais e serviços de bancos de dados baseados em nuvem, como Snowflake/Redshift. * Conhecimento dos princípios de engenharia de software e experiência prática com sistemas operacionais Unix/Linux/Windows, além de familiaridade com metodologias ágeis. * Domínio de sistemas de controle de versão, com experiência em gerenciamento de repositórios de código, ramificação (branching), mesclagem (merging) e colaboração em ambientes de desenvolvimento distribuídos. * Interesse pelas operações empresariais e compreensão abrangente de como sistemas robustos de BI impulsionam a lucratividade corporativa ao viabilizar tomadas de decisão orientadas por dados e insights estratégicos. ### **Diferenciais:** * Experiência com bancos de dados vetoriais como DataStax AstraDB, e no desenvolvimento de aplicações impulsionadas por LLM utilizando frameworks de código aberto populares como LangChain e LlamaIndex — incluindo engenharia de prompts, geração aumentada por recuperação (RAG) e orquestração de fluxos de trabalho inteligentes. * Familiaridade com avaliação e integração de frameworks de LLM de código aberto — como Hugging Face Transformers/LLaMA\-4 em fluxos de trabalho de ponta a ponta, incluindo ajuste fino e otimização de inferência. * Conhecimento de ferramentas de MLOps e pipelines CI/CD para gerenciamento de versionamento de modelos e implantações automatizadas. **Anexe seu currículo em inglês.** O processo de entrevista será conduzido em inglês. **Aceitamos apenas candidatos da América Latina.** Podemos utilizar ferramentas de inteligência artificial (IA) para apoiar partes do processo seletivo, como revisão de inscrições, análise de currículos ou avaliação de respostas. Essas ferramentas auxiliam nossa equipe de recrutamento, mas não substituem o julgamento humano. As decisões finais sobre contratação são sempre tomadas por pessoas. Caso deseje obter mais informações sobre como seus dados são processados, entre em contato conosco.