Engenheiro de Dados | Personalização BEES

Descrição

Resumo: Esta função envolve projetar, implementar e manter soluções ETL/ELT e pipelines de dados para impulsionar a transformação digital da AB InBev. Pontos principais: 1. Implementar soluções ETL/ELT e integração de dados entre múltiplos sistemas. 2. Projetar e otimizar pipelines de dados para grandes volumes de dados. 3. Aplicar habilidades de programação em Python, PySpark, Scala e SQL. **Sobre a AB InBev** A AB InBev é a maior cervejaria global e uma das cinco maiores empresas de bens de consumo do mundo. Com mais de 500 marcas de cerveja, somos líderes ou ocupamos a segunda posição em muitos dos principais mercados cervejeiros mundiais, incluindo América do Norte, América Latina, Europa, Ásia e África. **Sobre o ABI Growth Group** Criado em 2022, o Growth Group unifica nossas equipes de negócios para negócios (B2B), direto ao consumidor (DTC), Vendas e Distribuição, e Marketing. Ao reunir funções globais de tecnologia e comercial, o Growth Group nos permite maximizar o uso de dados e impulsionar a transformação digital e o crescimento orgânico da AB InBev em todo o mundo. **Sobre a BEES:** Como célula de tecnologia de nossa organização, temos um objetivo simples: crescer. Crescer como pessoas, como profissionais e como empresa. Para isso, utilizamos tecnologia para criar soluções digitais que simplifiquem a vida de nossos clientes, tornem suas decisões mais inteligentes e seus negócios mais lucrativos. Com escritórios em São Paulo e Campinas, incentivamos nossa equipe a participar de eventos importantes e reuniões presenciais significativas ao longo do ano. **Responsabilidades:** * Implementar soluções *ETL*/*ELT* e integração de dados entre múltiplos sistemas e fontes de dados. * Projetar, implementar e manter pipelines de dados para ingestão, armazenamento e processamento de grandes volumes de dados. * Colaborar com outras equipes para garantir segurança e conformidade dos dados. * Projetar, desenvolver e implementar soluções para otimizar o desempenho e a escalabilidade dos sistemas de processamento de dados. **Requisitos e qualificações:** * Graduação em Ciência da Computação, Engenharia da Computação, Sistemas de Informação, Análise e Desenvolvimento de Sistemas ou áreas afins; * Inglês intermediário; * Aplicar conhecimentos sobre conceitos e ferramentas de pipelines de dados para executar tarefas de transformação, limpeza e agregação de dados. * Utilizar frameworks e bibliotecas de pipelines de dados para automatizar tarefas de processamento de dados e otimizar fluxos de trabalho. * Seguir as melhores práticas no desenvolvimento de pipelines de dados, incluindo controle de versão, testes e documentação detalhada. * Aplicar habilidades de programação em *Python*, *PySpark*, Scala e SQL para manipular e transformar dados de forma eficaz. * Compreender e utilizar plataformas e serviços de computação em nuvem oferecidos por provedores como AWS, *Azure* e Google Cloud. * Desenvolver pipelines de dados usando frameworks de orquestração (ex.: Apache Airflow, Luigi, Mage, *Databricks* Workflows), integrando-se conforme necessário com *PySpark* e/ou Scala. * Compreender e aplicar princípios de engenharia de software em projetos de engenharia de dados. * Aplicar técnicas de modelagem de dados para projetar modelos eficientes e escaláveis. * Otimizar o desempenho de consultas *PySpark* e SQL, considerando volume de dados, complexidade das consultas e recursos do sistema. * Utilizar ferramentas de dados para ingestão, transformação, análise e visualização. **Habilidades interpessoais:** * Raciocínio lógico e habilidades analíticas; * Cumprimento de prazos e entrega de trabalho de qualidade; * Comunicação eficaz e transparente com outras equipes e colegas; * Habilidades de comunicação e interpessoais para apresentar e discutir casos com outras áreas envolvidas; * Autonomia na execução de tarefas; **Desejável:** * Desenvolver e manter APIs para troca de dados entre aplicações. * Experiência com plataformas de computação em nuvem (AWS, *Azure*, Google Cloud) e seus serviços. * Utilizar frameworks e ferramentas de automação, como *Azure* DevOps, Terraform e GitHub Actions. **Benefícios:** * Bônus baseado em desempenho\* * Bônus por frequência\* * Plano privado de previdência * Auxílio-refeição * Ambiente e código de vestuário informais * Dias de folga\* * Assistência médica, odontológica e seguro de vida * Descontos em medicamentos * Parceria WellHub * Auxílio-creche * Descontos em produtos Ambev\* * Parceria Clube Ben * Bolsa de estudos\* * Seguro para materiais escolares * Plataformas de idiomas e treinamentos * Auxílio-transporte Regras aplicadas\*