Engenheiro(a) de Dados Sênior

Descrição

Resumo da Vaga: Buscamos Engenheiro(a) de Dados Sênior para projetar arquiteturas robustas, otimizar workloads Spark e liderar automação DevOps em ambientes Databricks e SAP, focando em sistemas de missão crítica. Principais Destaques: 1. Atuação em projetos estratégicos de dados de missão crítica 2. Liderança em automação DevOps e otimização de Spark 3. Desenvolvimento de arquiteturas escaláveis em Databricks e Azure Estamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar em projetos estratégicos de dados em ambientes de missão crítica. Este(a) profissional será responsável por projetar arquiteturas robustas, otimizar workloads em Apache Spark e liderar iniciativas de automação DevOps utilizando ferramentas de linha de comando e SDKs, com foco em ambientes Databricks e SAP.\* Projetar e implementar arquiteturas de dados escaláveis e resilientes em ambientes Databricks e Azure. * Otimizar pipelines de dados em Apache Spark, garantindo performance e eficiência de recursos. * Automatizar processos de engenharia de dados utilizando CLI e SDKs em ambientes DevOps. * Atuar na sustentação e evolução de ambientes de produção com alta disponibilidade e criticidade. * Integrar e orquestrar dados provenientes de sistemas SAP e outras fontes corporativas. * Garantir governança, qualidade e rastreabilidade dos dados em todo o ciclo de vida. * Colaborar com times multidisciplinares para entregar soluções de dados alinhadas às necessidades de negócio. * Contribuir com boas práticas de engenharia, revisão de código e cultura DevOps.\* Certificação Databricks. * Sólida experiência com Apache Spark e otimização de jobs em larga escala. * Domínio de Databricks (Delta Lake, Workflows, Unity Catalog) e Azure Data Services. * Experiência com automação de pipelines e infraestrutura via CLI e SDKs (Databricks CLI, Terraform, Azure CLI). * Vivência em ambientes de produção com requisitos de alta disponibilidade e tolerância a falhas. * Conhecimento em integração de dados com sistemas SAP (SAP BW, SAP HANA, SAP Data Services). * Experiência com versionamento de código (Git), CI/CD e containers (Docker). * Capacidade de atuar com autonomia, liderar iniciativas técnicas e colaborar em times ágeis. Refer to Job description section for qualification required