Arquiteto de Dados - Databricks (Azure)

Descrição

Resumo da Vaga: Buscamos um Arquiteto de Dados com forte experiência em Databricks para atuar em projeto estratégico com foco em arquitetura, escalabilidade, performance e governança de dados em ambiente Azure, sendo referência técnica e hands-on. Principais Destaques: 1. Atuação estratégica e hands-on com Databricks e Azure 2. Foco em arquitetura, escalabilidade, performance e governança de dados 3. Referência técnica para o time e cliente Estamos buscando um(a) Arquiteto(a) de Dados com forte experiência em Databricks para atuar em um projeto estratégico, com foco em arquitetura, escalabilidade, performance e governança de dados em ambiente Azure. Procuramos um perfil com visão mais estratégica, mas também hands\-on, capaz de atuar como referência técnica junto ao cliente e ao time. Responsabilidades Definir e evoluir a arquitetura de dados em Databricks Projetar e implementar pipelines de dados escaláveis e performáticos Garantir boas práticas de engenharia, governança, segurança e observabilidade Atuar na otimização de pipelines, clusters e custos em cloud Apoiar troubleshooting em produção e direcionar melhorias técnicas Ser referência técnica para o time e para o cliente **Requisitos:** **Experiência sólida com Databricks em produção:** Workflows, Unity Catalog, Delta Lake e Asset Bundles Domínio avançado de PySpark e Spark Experiência com arquitetura Medallion e modelagem dimensional Forte atuação em otimização de pipelines, performance e volumetria de dados Experiência com clusters Databricks e tuning de custo vs performance **Vivência com Azure:** Key Vault, ADLS Gen2, Service Principals e permissões Experiência com CI/CD para dados, versionamento e deploy Conhecimento em Data Quality, Data Contracts, logging e observabilidade Experiência com integrações seguras e múltiplas fontes de dados Capacidade de troubleshooting em produção SQL avançado **Diferenciais:** Vivência com FinOps Conhecimento em segurança e governança no Unity Catalog Experiência com frameworks de engenharia de dados e testes automatizados Certificações Databricks e/ou Azure