[Vaga-27195] Engenheiro(a) Sênior de Dados - Databricks, Brasil

Descrição

Resumo: Buscamos um Engenheiro(a) Sênior de Dados para projetar, desenvolver e manter pipelines de dados robustos no Databricks, integrando e transformando dados de diversas fontes, além de orientar colegas e colaborar com equipes multifuncionais. Pontos principais: 1. Liderar o projeto e desenvolvimento de pipelines de dados robustos no Databricks 2. Integrar e transformar dados de diversas fontes usando Python e SQL 3. Fornecer orientação técnica e orientar colegas em um ambiente colaborativo Somos especialistas em **transformação tecnológica**, unindo expertise humana com IA para criar soluções tecnológicas escaláveis. Com mais de 8.000 CI\&Ters ao redor do mundo, construímos parcerias com mais de 1.000 clientes ao longo de nossos 30 anos de história. Inteligência Artificial é nossa realidade. Estamos procurando um Engenheiro(a) Sênior de Dados com sólido conhecimento em desenvolvimento e manutenção de pipelines de dados no Databricks, integrando e transformando dados de várias fontes, como APIs, bancos de dados relacionais, arquivos e muitos outros! Como membro sênior da equipe, você também fornecerá orientação técnica, orientará colegas e colaborará com equipes multifuncionais, incluindo cientistas de dados, analistas e engenheiros de plataforma. **Visão Geral da Vaga** Como Engenheiro(a) Sênior de Dados, você liderará o projeto e desenvolvimento de pipelines de dados robustos, integrando e transformando dados de diversas fontes, como APIs, bancos de dados relacionais e arquivos. Ao colaborar de perto com as equipes de negócios e análise, você garantirá entregas de alta qualidade que atendam às necessidades estratégicas de nossa organização. Sua especialização será fundamental para manter a qualidade, confiabilidade, segurança e governança dos dados ingeridos, impulsionando assim nossa missão de Colaboração, Inovação e Transformação. **Principais Responsabilidades:** Desenvolver e manter pipelines de dados. Integrar dados de diversas fontes (APIs, bancos de dados relacionais, arquivos etc.). Colaborar com as equipes de negócios e análise para compreender os requisitos de dados. Garantir qualidade, confiabilidade, segurança e governança dos dados ingeridos. Seguir práticas modernas de DataOps, como controle de versão de código, testes de dados e CI/CD. Documentar processos e boas práticas em engenharia de dados. **Habilidades e Qualificações Necessárias:** **Habilidades Obrigatórias:** Experiência comprovada na construção e gestão de pipelines de dados em larga escala no Databricks (PySpark, Delta Lake, SQL). Fortes habilidades de programação em Python e SQL para processamento e transformação de dados. Profundo entendimento de frameworks ETL/ELT, armazenamento de dados e processamento distribuído de dados. Experiência prática com práticas modernas de DataOps: controle de versão (Git), pipelines de CI/CD, testes automatizados e infraestrutura como código. Familiaridade com plataformas em nuvem (AWS, Azure ou GCP) e serviços de dados relacionados. Fortes habilidades de resolução de problemas, com capacidade de solucionar questões de desempenho, escalabilidade e confiabilidade. Domínio do Git. Inglês avançado é essencial. **Habilidades Desejáveis:** Experiência com contratos de dados, evolução de esquemas e garantia de compatibilidade entre serviços. Especialização em frameworks de qualidade de dados (por exemplo, Great Expectations, Soda, testes dbt ou soluções personalizadas). Familiaridade com DBT, Atlan e Soda. Integração com Power BI. Experiência com streaming de dados. \#LI\-BM2 **Por que se juntar a nós?*** Salário competitivo * Férias remuneradas generosas * Licença médica generosa * Benefícios médicos e odontológicos 100% custeados a partir do primeiro dia * Distribuição anual de participação nos lucros * Licença parental remunerada * Consultor(a) de carreira dedicado(a) E muito mais… Colaboração é nosso superpoder, diversidade nos une e excelência é nosso padrão. Valorizamos identidades diversas e experiências de vida distintas, promovendo um ambiente de trabalho diverso, inclusivo e seguro. Incentivamos candidaturas de grupos diversos e sub-representados às nossas vagas.