Engenheiro de dados sênior (híbrida em sp)

Descrição

Resumo da Vaga: Procuramos um profissional com experiência em Apache Spark, Python/Scala, AWS, orquestração de dados com Airflow, e domínio em APIs REST, para desenvolver e projetar soluções em dados. Principais Destaques: 1. Vivência prática com Apache Spark 2. Conhecimento em Python e Scala (ou Java) 3. Experiência com orquestração de pipelines de dados, preferencialmente Airflow **Descrição:** Vivência prática com Apache Spark; Conhecimento em Python e Scala (ou Java); Sólido conhecimento na utilização de serviços AWS (como EMR, RDS, S3\); Experiência com orquestração de pipelines de dados, preferencialmente com Airflow; Domínio em estruturas de dados e desenvolvimento de API REST; Noções de práticas CI/CD (Integração e Entrega Contínua). **Desejáveis:** Entendimento avançado da configuração e otimização de recursos AWS; Experiência com arquitetura de Data Lake. Desenvolver APIs e aplicações voltadas à manipulação e exposição de dados; Projetar soluções em conjunto com áreas de negócio e times técnicos (Arquitetura, Segurança, Infraestrutura); Garantir a qualidade do software, com foco em testes automatizados, versionamento e manutenibilidade de código; Atuar com iniciativa e autonomia na resolução de problemas técnicos; Colaborar com outros engenheiros e stakeholders na criação de soluções eficazes e sustentáveis. 2511210202471772787