Engenhario (a) Dados ( Azure & Databricks )

Descrição

**Description:** ---------------- Junte\-se à Digiage e ajude a escalar a inteligência artificial com excelência operacional. Estamos em busca de um(a) Engenheiro(a) de Dados Azure \& Databricks para atuar em projetos estratégicos de Data \& Analytics, contribuindo para a construção, modernização e evolução de plataformas de dados em ambiente Cloud Azure. Buscamos profissionais com perfil analítico, visão de arquitetura e experiência em engenharia de dados, que desejem atuar em soluções modernas, escaláveis e orientadas a dados, apoiando iniciativas de analytics, inteligência artificial e transformação digital. **Responsabilidades:** * Desenvolver, manter e otimizar pipelines de dados utilizando Azure Data Factory e Azure Databricks; * Atuar na ingestão, transformação e disponibilização de dados para ambientes analíticos; * Implementar soluções escaláveis em Azure Data Lake Storage; * Trabalhar com processamento de grandes volumes de dados estruturados e não estruturados; * Apoiar iniciativas de modernização e migração de dados para ambiente Cloud Azure; * Garantir qualidade, organização, monitoramento e governança dos dados; * Colaborar na implementação de boas práticas de arquitetura e engenharia de dados; * Atuar na gestão e governança de dados utilizando Unity Catalog; * Desenvolver rotinas e processos em Databricks com foco em performance e escalabilidade; * Trabalhar em conjunto com times de BI, Analytics, Engenharia e Arquitetura; * Apoiar melhorias contínuas nas soluções e processos de dados; * Participar de discussões técnicas e contribuir com inovação nas arquiteturas de dados. **Requirements:** ----------------- **Requisitos:** * Ensino superior completo em TI, Engenharia, Ciência da Computação, Sistemas de Informação ou áreas correlatas; * Experiência com desenvolvimento de pipelines de dados (ETL/ELT); * Conhecimento sólido em Azure Data Factory e Azure Databricks; * Vivência em ambientes produtivos na plataforma Azure; * Conhecimento em SQL para transformação, manipulação e análise de dados; * Conhecimento em conceitos de Data Lake e arquitetura moderna de dados; * Experiência com Databricks, incluindo: Delta Lake , Workflows e Notebooks; * Noções de modelagem de dados para ambientes analíticos: Star Schema, OBT e Data Vault * Conhecimento em processos de ingestão, transformação e orquestração de dados; * Interesse e experiência em projetos de migração e modernização de dados para Cloud. **Diferenciais:** * Conhecimento em Unity Catalog; * Experiência com PySpark ou Spark SQL; * Vivência com CI/CD e automação de pipelines; * Conhecimento em infraestrutura como código; * Certificações Microsoft Azure; * Experiência com Power BI ou ferramentas de Analytics; * Vivência em projetos de inteligência artificial e machine learning; * Conhecimento em governança, segurança e qualidade de dados.