Engenheiro Sênior de Software de Dados

Descrição

Resumo: Procuramos um Engenheiro Sênior de Software de Dados para colaborar em soluções de integração de dados, desenvolver e otimizar pipelines de dados e colocar modelos de ciência de dados em produção para um projeto de alto impacto. Pontos principais: 1. Trabalhar em projetos de alto impacto para uma marca reconhecida 2. Desenvolver e otimizar pipelines de dados utilizando tecnologias de ponta 3. Colaborar com equipes multifuncionais e cientistas de dados Estamos procurando um **Engenheiro Sênior de Software de Dados** remoto para integrar nossa equipe. O candidato ideal terá sólida formação técnica e experiência especializada em Apache Spark, Microsoft Azure e Python. Esta posição oferece uma oportunidade única de trabalhar em um projeto de alto\-impacto com uma das marcas mais reconhecidas do mundo. **Responsabilidades** * Colaborar com equipes multifuncionais para construir e manter a solução de integração de dados * Desenvolver, construir e otimizar pipelines de dados utilizando Apache Spark, Microsoft Azure e Python * Garantir que os pipelines de dados sejam escaláveis, sustentáveis e confiáveis * Levar modelos de ciência de dados à produção * Desenvolver e manter modelos de previsão para apoiar decisões empresariais * Garantir qualidade e consistência dos dados em todas as fontes * Monitorar e otimizar pipelines de dados para assegurar processamento eficiente e eficaz de dados * Colaborar com cientistas de dados para desenvolver e implementar modelos de aprendizado de máquina * Trabalhar com a equipe para melhorar e otimizar continuamente a solução de integração de dados da FedEx * Manter-se atualizado sobre tecnologias emergentes e tendências na engenharia de software de dados **Requisitos** * Pelo menos 3\+ anos de experiência em engenharia de software de dados ou funções similares * Experiência especializada em Apache Spark, Microsoft Azure e Python * Conhecimento sólido de modelos de previsão, ciência de dados e MLOps * Experiência com Databricks para construir, manter e otimizar pipelines de dados * Capacidade de levar modelos de ciência de dados à produção * Experiência com Git para controle de versão * Compreensão dos conceitos básicos do Azure, incluindo nuvens, regiões, ADLS e computação * Excelentes habilidades analíticas e de resolução de problemas, com capacidade de pensar de forma crítica e criativa * Experiência em ambientes de desenvolvimento Ágil * Excelentes habilidades de comunicação em inglês, tanto escrita quanto falada (nível B2\+) **Desejável** * Experiência com Pandas para manipulação e análise de dados * Conhecimento sólido de SQL e tabelas relacionais * Compreensão de modelos estatísticos e capacidade de desenvolver modelos utilizando Python, Spark, etc. * Conhecimento do ecossistema de ferramentas de aprendizado de máquina