Engenheiro Sênior de Software de Dados

Descrição

Resumo: Procuramos um Engenheiro Sênior de Software de Dados para projetar, construir e otimizar soluções de integração de dados e operacionalizar modelos de ciência de dados para uma marca líder. Pontos principais: 1. Oportunidade de trabalhar em projetos de grande impacto para uma marca líder mundial 2. Desenvolver e otimizar pipelines de dados usando Apache Spark, Azure e Python 3. Transformar modelos de ciência de dados em soluções prontas para produção Estamos procurando um Engenheiro Sênior de Software de Dados remoto para se juntar à nossa equipe. Esta posição exige um especialista técnico com sólida experiência em Apache Spark, Microsoft Azure e Python. Você terá a oportunidade de trabalhar em um projeto de alto\-impacto para uma das marcas líderes mundiais, contribuindo para soluções inovadoras de dados que impulsionam o sucesso empresarial. **Responsabilidades** * Trabalhar em estreita colaboração com equipes multifuncionais para projetar, construir e manter soluções de integração de dados * Desenvolver e otimizar pipelines de dados usando Apache Spark, Microsoft Azure e Python * Garantir que os pipelines de dados sejam confiáveis, escaláveis e fáceis de manter * Transformar modelos de ciência de dados em soluções prontas para produção * Criar e manter modelos de previsão para apoiar processos de tomada de decisão empresarial * Garantir a consistência e qualidade dos dados em todas as fontes de dados * Monitorar e ajustar finamente os pipelines de dados para um processamento de dados eficiente e eficaz * Colaborar com cientistas de dados para desenvolver e implementar modelos de aprendizado de máquina * Aprimorar e melhorar continuamente a solução de integração de dados para atender às necessidades empresariais em constante evolução * Manter-se atualizado sobre tecnologias emergentes e melhores práticas em engenharia de software de dados **Requisitos** * Pelo menos 3 anos de experiência em engenharia de software de dados ou função semelhante * Conhecimento avançado em Apache Spark, Microsoft Azure e Python * Amplo entendimento de modelos de previsão, MLOps e princípios de ciência de dados * Experiência prática com Databricks para construção, manutenção e otimização de pipelines de dados * Capacidade comprovada de operacionalizar modelos de ciência de dados para ambientes de produção * Domínio do Git para controle de versão * Bom conhecimento dos conceitos do Azure, incluindo nuvens, regiões, ADLS e computação * Fortes habilidades analíticas e de resolução de problemas, com capacidade de pensar de forma crítica e criativa * Experiência em equipes e ambientes de desenvolvimento ágil * Excelentes habilidades de comunicação em inglês, tanto verbais quanto escritas, nível B2\+ **Desejável** * Experiência no uso do Pandas para manipulação e análise de dados * Conhecimento sólido de SQL e estruturas de bancos de dados relacionais * Compreensão de modelos estatísticos e experiência no desenvolvimento de modelos usando Python ou Spark * Familiaridade com ferramentas e tecnologias no campo do aprendizado de máquina