




Resumo da Vaga: Atuação como Engenheiro de Dados e Arquiteto, com foco em modelagem, construção de pipelines, arquitetura de dados e liderança técnica em projetos com Big Data e metodologias ágeis. Principais Destaques: 1. Experiência com Engenharia e Arquitetura de Dados e Big Data 2. Liderança técnica em projetos de dados e times de engenharia 3. Atuação com DevOps, CI/CD, Governança e Segurança de Dados **Descrição:** Atuação com Engenharia de Dados e Arquitetura, modelagem de dados, construção de pipelines de ingestão e transformação. Arquitetura orientada a componentes reutilizáveis e data products. Plataformas e Tecnologias de Big Data Apache Spark, Apache Flink, Kafka, Iceberg, Kudu, Hive. DevOps e Produtização de Código Versionamento com Git. Integração contínua e deploy com esteiras DevOps (CI/CD). Testes automatizados e monitoramento de pipelines. Governança e Segurança de Dados Controle de acesso e políticas com Apache Ranger. Conhecimento em LGPD/GDPR e boas práticas de proteção de dados. Cloud e Infraestrutura Experiência com ambientes cloud\-based (AWS, Azure, GCP). Gerenciamento de recursos e escalabilidade de soluções. Ferramentas de Orquestração e Monitoramento Airflow, ou ferramentas similares. Monitoramento de jobs e performance de sistemas distribuídos. Conhecimentos em Machine Learning Integração de modelos preditivos em pipelines de dados. Suporte a squads de negócio na operacionalização de modelos. Liderança técnica em projetos de dados Experiência em gestão de times de engenharia de dados, com foco em entrega de componentes reutilizáveis e escaláveis. Atuação em ambientes com squads multidisciplinares e metodologias ágeis. Construção de pipelines e arquitetura de dados Vivência na modelagem, ingestão, transformação e disponibilização de dados em larga escala. Conhecimento em arquiteturas orientadas a data products e plataformas analíticas. Domínio de tecnologias de Big Data Experiência prática com ferramentas como Apache Spark, Flink, Kafka, Iceberg, Kudu, Hive. Plataformas equivalentes para orquestração de jobs. Governança e segurança de dados Aplicação de políticas de acesso e mascaramento com ferramentas como Apache Ranger. Garantia de conformidade com normas de proteção de dados (LGPD, GDPR). Produtização de código com DevOps Experiência com versionamento em Git, integração contínua (CI/CD) e esteiras DevOps para deploy de soluções em produção. Aplicação de testes automatizados e monitoramento de componentes. Foco em eficiência operacional Histórico de entrega de soluções que reduzem retrabalho, aumentam a autonomia dos times de negócio e melhoram a performance dos processos de dados. 2511210202471882091


