Engenheiro de Dados e Aprendizado de Máquina

Descrição

Esta é uma oportunidade em regime **integral para um engenheiro de dados/aprendizado de máquina excepcional da América Latina.** **A verificação presencial será realizada.** A IDT (www.idt.net) é uma empresa norte-americana de telecomunicações fundada em 1990, com sede em Nova Jersey. Hoje, é líder do setor em serviços pré-pagos de comunicação e pagamento, além de ser uma das maiores operadoras mundiais de voz internacional. Estamos listados na NYSE, empregamos mais de 1300 pessoas em mais de 20 países e geramos receitas superiores a **US$ 1,5 bilhão**. Estamos buscando um engenheiro de dados/aprendizado de máquina qualificado para integrar nossa equipe de BI e desempenhar um papel ativo no projeto, construção e manutenção do pipeline de dados de ponta a ponta, bem como na arquitetura e no design que sustentam nosso data warehouse, aplicações orientadas por modelos de linguagem (LLM) e inteligência artificial aplicada à BI. **Se você procura uma empresa que lhe ofereça a máxima flexibilidade na escolha do local de trabalho, essa oportunidade é para você!** ### **Responsabilidades:** * Projetar, desenvolver e manter pipelines de dados escaláveis para suportar ingestão, transformação e entrega em repositórios centralizados de características (feature stores), fluxos de treinamento de modelos e serviços de inferência em tempo real. * Construir e otimizar fluxos de trabalho para extração, armazenamento e recuperação de representações semânticas de dados não estruturados, possibilitando padrões avançados de busca e recuperação. * Arquitetar e implementar soluções leves de análise e painéis que proporcionem experiências de consulta em linguagem natural e insights impulsionados por IA. * Definir e executar processos para gerenciamento de técnicas de engenharia de prompts, fluxos de orquestração e rotinas de ajuste fino de modelos, visando habilitar interfaces conversacionais. * Supervisionar bancos de dados vetoriais e desenvolver metodologias eficientes de indexação para suportar fluxos de trabalho de geração aumentada por recuperação (RAG). * Colaborar com partes interessadas nos dados para coletar requisitos relacionados a iniciativas com modelos de linguagem e traduzi-los em soluções escaláveis. * Criar e manter documentação abrangente de todos os processos de dados, fluxos de trabalho e rotinas de implantação de modelos. * Deve estar disposto a se manter atualizado e aprender novas metodologias emergentes em engenharia de dados, MLOps e operações com modelos de linguagem (LLM). ### **Requisitos:** * 8 anos ou mais de experiência como engenheiro de dados, com pelo menos 2 anos focados em MLOps. * Excelentes habilidades de comunicação em inglês. * Habilidades eficazes de comunicação oral e escrita com a equipe de BI e com a comunidade de usuários. * Experiência comprovada no uso de Python para tarefas de engenharia de dados, incluindo transformação, manipulação avançada de dados e processamento em larga escala. * Profundo entendimento de bancos de dados vetoriais e arquiteturas RAG, bem como sua aplicação em fluxos de recuperação semântica. * Capacidade comprovada de integrar frameworks de LLM de código aberto aos fluxos de trabalho de engenharia de dados, para treinamento de ponta a ponta, personalização e inferência escalável de modelos. * Experiência com plataformas em nuvem como AWS ou Azure Machine Learning para implantações gerenciadas de LLM. * Experiência prática com tecnologias de big data, incluindo Apache Spark, Hadoop e Kafka, para processamento distribuído e ingestão de dados em tempo real. * Experiência no projeto de pipelines de dados complexos que extraem dados de fontes RDBMS, JSON, APIs e arquivos planos. * Habilidades comprovadas em programação SQL e PL/SQL, com domínio avançado em metodologias de Business Intelligence e data warehouse, além de experiência prática em um ou mais sistemas de banco de dados relacionais e serviços de bancos de dados baseados em nuvem, como Snowflake ou Redshift. * Conhecimento dos princípios de engenharia de software e experiência em sistemas operacionais Unix/Linux/Windows, bem como familiaridade com metodologias ágeis. * Domínio de sistemas de controle de versão, com experiência no gerenciamento de repositórios de código, ramificações (branching), mesclagem (merging) e colaboração em ambientes de desenvolvimento distribuídos. * Interesse pelas operações empresariais e compreensão abrangente de como sistemas robustos de BI impulsionam a lucratividade corporativa ao permitir a tomada de decisões orientada por dados e insights estratégicos. ### **Diferenciais:** * Experiência com bancos de dados vetoriais, como DataStax AstraDB, e no desenvolvimento de aplicações impulsionadas por LLM utilizando frameworks populares de código aberto, como LangChain e LlamaIndex — incluindo engenharia de prompts, geração aumentada por recuperação (RAG) e orquestração de fluxos de trabalho inteligentes. * Familiaridade com avaliação e integração de frameworks de LLM de código aberto — como Hugging Face Transformers/LLaMA-4 — em fluxos de trabalho de ponta a ponta, incluindo ajuste fino e otimização de inferência. * Conhecimento de ferramentas de MLOps e pipelines de CI/CD para gerenciamento de versionamento de modelos e implantações automatizadas. **Por favor, anexe seu currículo em inglês.** O processo de entrevista será conduzido em inglês. **A verificação presencial será realizada. Perfis falsos serão relatados.** **Aceitamos apenas candidatos da América Latina.** Podemos utilizar ferramentas de inteligência artificial (IA) para apoiar partes do processo de contratação, como revisão de inscrições, análise de currículos ou avaliação de respostas e identificação de possíveis inconsistências ou sinais de verificação nos materiais de inscrição, com base nas informações disponíveis. Essas ferramentas auxiliam nossa equipe de recrutamento, mas não substituem o julgamento humano. As decisões finais de contratação são sempre tomadas por pessoas. Caso deseje obter mais informações sobre como seus dados são processados, entre em contato conosco.