Descrição
Resumo da Vaga:
Atuação em Engenharia de Dados e Arquitetura, modelagem, construção de pipelines e gerenciamento de equipes multidisciplinares com foco em soluções escaláveis.
Principais Destaques:
1. Experiência com Arquitetura de Dados e Big Data (Spark, Flink, Kafka)
2. Liderança técnica em projetos de dados e gestão de equipes
3. Domínio de DevOps, Governança de Dados e Cloud (AWS, Azure, GCP)
**Descrição:**
Atuação com Engenharia de Dados e Arquitetura, modelagem de dados, construção de pipelines de ingestão e transformação.
Arquitetura orientada a componentes reutilizáveis e data products.
Plataformas e Tecnologias de Big Data
Apache Spark, Apache Flink, Kafka, Iceberg, Kudu, Hive.
DevOps e Produtização de Código
Versionamento com Git.
Integração contínua e deploy com esteiras DevOps (CI/CD).
Testes automatizados e monitoramento de pipelines.
Governança e Segurança de Dados
Controle de acesso e políticas com Apache Ranger.
Conhecimento em LGPD/GDPR e boas práticas de proteção de dados.
Cloud e Infraestrutura
Experiência com ambientes cloud\-based (AWS, Azure, GCP).
Gerenciamento de recursos e escalabilidade de soluções.
Ferramentas de Orquestração e Monitoramento
Airflow, ou ferramentas similares.
Monitoramento de jobs e performance de sistemas distribuídos.
Conhecimentos em Machine Learning
Integração de modelos preditivos em pipelines de dados.
Suporte a squads de negócio na operacionalização de modelos.
Liderança técnica em projetos de dados
Experiência em gestão de times de engenharia de dados, com foco em entrega de componentes reutilizáveis e escaláveis.
Atuação em ambientes com squads multidisciplinares e metodologias ágeis.
Construção de pipelines e arquitetura de dados
Vivência na modelagem, ingestão, transformação e disponibilização de dados em larga escala.
Conhecimento em arquiteturas orientadas a data products e plataformas analíticas.
Domínio de tecnologias de Big Data
Experiência prática com ferramentas como Apache Spark, Flink, Kafka, Iceberg, Kudu, Hive.
Plataformas equivalentes para orquestração de jobs.
Governança e segurança de dados
Aplicação de políticas de acesso e mascaramento com ferramentas como Apache Ranger.
Garantia de conformidade com normas de proteção de dados (LGPD, GDPR).
Produtização de código com DevOps
Experiência com versionamento em Git, integração contínua (CI/CD) e esteiras DevOps para deploy de soluções em produção.
Aplicação de testes automatizados e monitoramento de componentes.
Foco em eficiência operacional
Histórico de entrega de soluções que reduzem retrabalho, aumentam a autonomia dos times de negócio e melhoram a performance dos processos de dados.
2511210202471882091