Engenheiro Sênior de Software de Dados

Descrição

Resumo: Procuramos um Engenheiro Sênior de Software de Dados para construir aplicações confiáveis centradas em dados e implementar sistemas de ponta utilizando tecnologias Big Data e plataformas em nuvem. Pontos principais: 1. Desempenhar um papel fundamental na construção de aplicações confiáveis centradas em dados 2. Utilizar especialização em tecnologias Big Data e plataformas em nuvem 3. Colaborar com equipes multidisciplinares para entregar soluções de grande impacto Estamos procurando um **Engenheiro Sênior de Software de Dados** qualificado para desempenhar um papel fundamental na construção de aplicações confiáveis centradas em dados. Neste cargo, você utilizará sua especialização em tecnologias Big Data, plataformas em nuvem e melhores práticas de engenharia para criar e implementar sistemas de ponta. Você trabalhará em estreita colaboração com equipes multidisciplinares para alinhar-se aos objetivos organizacionais e entregar soluções de grande impacto. **Responsabilidades** * Desenvolver e dar suporte a aplicações de software de dados projetadas para Engenheiros de Integração de Dados * Projetar e implementar plataformas avançadas de análise usando tecnologias como Spark, PySpark e bancos de dados NoSQL * Aproveitar soluções em nuvem, como a AWS, para otimizar fluxos de trabalho e melhorar a eficiência do sistema * Colaborar com equipes de produto e engenharia para coletar requisitos e contribuir para a tomada de decisões estratégicas * Trabalhar com arquitetos, líderes técnicos e outras partes interessadas para garantir a integração perfeita das soluções * Analisar ambientes técnicos e necessidades empresariais para entregar implementações escaláveis e de alto desempenho * Realizar revisões de código para manter os padrões de desenvolvimento e assegurar o controle de qualidade * Testar e validar sistemas para verificar se atendem aos critérios funcionais, técnicos e de desempenho * Elaborar e manter documentação detalhada para apoiar tanto os processos de desenvolvimento quanto os operacionais * Interagir diretamente com clientes para compreender suas necessidades e fornecer recomendações técnicas personalizadas **Requisitos** * Graduação ou mestrado em Ciência da Computação, Engenharia de Software ou área correlata * Mínimo de 3 anos de experiência em Engenharia de Software de Dados com especialização em tecnologias Big Data * Conhecimento sólido dos princípios de engenharia de dados, incluindo armazenamento, gerenciamento, segurança e visualização * Experiência com pipelines de dados, conceitos de Data Warehousing e Data Lakes * Proficiência em linguagens de programação como Python, Java, Scala ou Kotlin * Amplo conhecimento em sistemas de bancos de dados SQL e NoSQL * Conhecimento prático de ferramentas Big Data, especialmente Spark e PySpark * Experiência comprovada no projeto e implantação de soluções baseadas em nuvem utilizando serviços AWS, como Glue e RedShift * Familiaridade com pipelines CI/CD para agilizar os processos de integração e implantação * Conhecimento sobre ferramentas de contêineres e gerenciamento de recursos, como Docker, Kubernetes e Yarn * Experiência com Databricks em projetos avançados de engenharia e análise de dados * Excelentes habilidades de comunicação em inglês, escrita e falada, nível B2 ou superior **Desejável** * Experiência prática com outras ferramentas Big Data, incluindo Hadoop, Hive e Flink * Conhecimento de metodologias SDLC, com ênfase em frameworks ágeis * Capacidade comprovada de gerenciar e executar eficazmente o ciclo de vida de desenvolvimento de software