Engenheiro de Dados Pleno

Descrição

**Missão:** Sua missão será atuar na linha de frente dos **novos projetos de dados**, garantindo a entrega de soluções de ponta a ponta, da ingestão à visualização final, assegurando que as novas demandas de negócio sejam atendidas com agilidade e precisão. Utilizando **Databricks e dbt**, você será o responsável por transformar necessidades de diversas áreas de negócio em ativos de dados precisos, assegurando que as novas demandas sejam atendidas com agilidade e excelência técnica. Irá atuar em um de nossos maiores clientes do **segmento financeiro**. Integrando um ecossistema com desafios de alta complexidade técnica, operando em um ambiente dinâmico que exige soluções resilientes para grandes volumes de dados em infraestrutura **Azure**. **Conhecimentos necessários/requisitos essenciais:** * Experiência em Python, SQL, PySpark e, principalmente, DBT; * Experiência com Delta Lake, Databricks e Unity Catalog; * Vivência em infraestrutura Azure; * Experiência com versionamento de código (Git) e processos de CI/CD (preferencialmente em Azure DevOps); * Conhecimento sólido em arquitetura Lakehouse com design Medalhão. **Diferenciais desejáveis (não obrigatórios):** * Experiência prévia em **instituições financeiras.** * LGPD e GDPR. **Responsabilidades:** * **Desenvolvimento de Pipelines de Dados:** Construir, otimizar e manter fluxos de dados escaláveis utilizando **Python**, **SQL** e **PySpark**, garantindo o processamento eficiente de grandes volumes de informação. * **Modelagem e Transformação com DBT:** camada de transformação de dados utilizando **dbt**, aplicando regras de negócio e garantindo a qualidade, documentação e testabilidade do código de dados. * **Gestão do Ciclo de Vida do Dado (Medalhão):** Estruturar e organizar os dados dentro da arquitetura **Lakehouse**, garantindo a transição fluida e governada entre as camadas **Bronze, Silver e Gold**. * **Governança e Segurança:** Configurar e gerenciar permissões, linhagem de dados e catálogos através do **Unity Catalog**, assegurando conformidade com as normas. * **Atuação em Delta Lake:** Garantir a confiabilidade e a performance do armazenamento utilizando **Delta Lake.** * **Cultura DevOps e Automação:** Sustentar o ciclo de vida do desenvolvimento através de versionamento em **Git** e automação de deploys via esteiras de **CI/CD** (Azure DevOps), garantindo que as entregas em produção sejam seguras e rastreáveis. * **Colaboração:** Apoiar o time promovendo as melhores práticas e trocando experiências. **O que você encontra aqui:** * Trabalho 100% remota (anywhere office). * Avaliação de desempenho, plano de desenvolvimento individual, Programa Investindo em Você. * Programa de saúde e bem\-estar, plano de saúde e odontológico. * Desafios gameficados e lojinha para comprar produtos com a sua pontuação. * Day Off de Aniversário. * Auxílio Equipamento/Home Office. * Vale flexível para gastos diários. * Programa de Indicação Premiada. * Seguro de Vida. Aviso de Privacidade \- Recrutamento Seleção: https://drive.google.com/file/d/1LV2tTa\_PeSbyiXuqrG\_6WJw0jrEqRxnA/view?usp\=sharing