Engenheiro de Dados Sênior – Equipe de Governança

Descrição

**Por que esta vaga existe** ------------------------ Na Blip, os dados não apenas informam decisões — eles impulsionam experiências. Contudo, dados em escala exigem disciplina: governança que capacita (e não bloqueia), custos previsíveis e padrões que aceleram (e não retardam) as equipes. Estamos migrando do Azure/Databricks para o Google Cloud Platform com um mandato claro: construí-lo corretamente desde o primeiro dia. Sem dívidas legadas. Sem pipelines sem governança. Sem surpresas de custo. Buscamos um Engenheiro de Dados Sênior com uma combinação rara: habilidades técnicas profundas e práticas em plataformas de dados, aliadas ao pensamento estratégico em governança, otimização de custos e capacitação. Alguém capaz de transformar políticas em código, converter artefatos do Google PSO em modelos reutilizáveis e escalar boas práticas entre domínios — sem se tornar a "polícia das políticas". **Sua missão** ---------------- Você será a espinha dorsal técnica do nosso Centro de Excelência (CoE) em Dados e Analytics, traduzindo a estratégia de governança em automação, padrões e ferramentas que tornem "fazer a coisa certa" o caminho mais rápido e fácil para as equipes de dados. Você trabalhará lado a lado com nosso Arquiteto de Dados e com os Serviços Profissionais do Google Cloud para: * Implementar governança como código * Incorporar a disciplina FinOps a cada pipeline, conjunto de dados e modelo desde o primeiro dia. * Construir modelos, aceleradores e estruturas reutilizáveis que possam ser escalados entre domínios * Capacitar a governança federada: dotando as equipes de ferramentas de autoatendimento, guardrails e observabilidade. ### **Principais responsabilidades** ### **Engenharia e automação de governança** * Projetar e implementar estruturas de governança como código usando ferramentas nativas do GCP * Criar fluxos de trabalho automatizados para classificação de dados, rastreamento de linhagem, validação de qualidade e relatórios de conformidade (LGPD, GDPR, ISO 27001\). * Criar módulos reutilizáveis de Infraestrutura como Código (IaC) (Terraform) para fundamentos de governança: estrutura de projetos, papéis IAM, políticas de segurança, registro de auditoria e políticas de retenção. * Implementar o framework Governance Seal: validação automatizada de que conjuntos de dados/pipelines atendem aos padrões mínimos (qualidade, segurança, documentação, eficiência de custos) antes de entrarem em produção. ### **FinOps para dados e otimização de custos** * Incorporar as melhores práticas FinOps aos modelos do CoE: estratégias de particionamento, agrupamento, classes de armazenamento (Standard/Nearline/Coldline/Archive), políticas de ciclo de vida, otimização de consultas, reservas de slots e escalonamento automático. * Construir monitoramento e alertas de custo para serviços de dados no GCP. * Identificar, remediar e direcionar desperdícios de custo: tabelas não utilizadas, pipelines redundantes, consultas ineficientes, recursos superdimensionados. ### **Plataformas, modelos e aceleradores do CoE** * Transformar entregáveis (TDDs, módulos IaC, padrões de pipeline, sessões KT) em padrões de CoE prontos para produção: documentados, versionados, testados e reutilizáveis. * Construir um catálogo de padrões e modelos de pipeline para casos de uso comuns: ingestão em lote (JDBC, APIs, arquivos), streaming (Pub/Sub, Kafka), CDC, contratos de dados e fornecimento da camada gold (rápida + analítica). * Desenvolver kits de autoatendimento para Gestores de Dados e engenheiros de domínio: scripts de configuração de projeto, geradores de contratos de dados, modelos de regras de qualidade, visualização de linhagem e enriquecimento de metadados. * Estabelecer padrões CI/CD para pipelines de dados: testes automatizados (validação de esquema, qualidade de dados, verificações de segurança), portões de implantação (validação do Governance Seal) e estratégias de reversão. ### **Modelagem e projeto de armazenamento de dados (com foco em governança)** * Projetar modelos de dados de referência que incorporam governança desde o início: propriedade clara, definições semânticas, políticas de acesso, regras de retenção e rastreabilidade de linhagem. * Otimizar armazenamento e computação tanto para desempenho quanto para custo: particionamento, agrupamento, indexação, compactação (Parquet, Avro), formatos de tabela Delta/Iceberg. * Definir padrões para contratos de dados (esquemas, SLAs, propriedade, gestão de mudanças) e implementá-los como código (esquemas Avro, Protobuf, contratos dbt, frameworks de validação de dados). ### **Observabilidade, qualidade e confiabilidade** * Construir verificações de qualidade de dados * Implementar linhagem de dados ponta a ponta (Dataplex, OpenLineage, extração personalizada de metadados) desde sistemas-fonte até consumo em analytics/IA. * Construir monitoramento e alertas para KPIs de governança: conformidade com políticas, atualidade dos dados, violações de SLA de qualidade, anomalias de acesso e estouros de custo. * Definir e impor SLAs/SLOs para entrega, precisão e disponibilidade de dados — nas camadas raw, trusted e gold. ### **Capacitação e liderança** * Atuar como mentor técnico e parceiro crítico para Gestores de Dados, engenheiros de domínio e equipes de analytics que adotam os padrões do CoE. * Liderar revisões de design e spikes arquitetônicos para padrões de governança, FinOps e plataformas. * Produzir manuais operacionais, runbooks e laboratórios práticos: "Como configurar um projeto governado no GCP", "Checklist FinOps para BigQuery", "Implementando mascaramento dinâmico de dados", etc. * Facilitar sessões da Comunidade de Prática: compartilhar padrões, solucionar bloqueios, celebrar conquistas e iterar com base no feedback. **O que buscamos** -------------------------- ### **Experiência** * 6 anos ou mais em Engenharia de Dados, Engenharia de Plataformas ou Infraestrutura de Dados, com pelo menos 2 anos voltados especificamente para governança, qualidade de dados ou capacitação de plataformas. * Experiência comprovada na implementação de estruturas de governança de dados em produção: gestão de metadados, controle de acesso, qualidade de dados, linhagem e conformidade. * Experiência prática com FinOps em plataformas de dados: monitoramento de custos, otimização, modelos de rateio/cobrança interna (chargeback/showback) e orçamentação. * Experiência na construção de estruturas, modelos ou plataformas internas reutilizáveis consumidas por outros engenheiros (não apenas pipelines pontuais). ### **Fundamentos técnicos** * Conhecimento avançado do GCP (obrigatório): BigQuery (IAM, políticas, particionamento, agrupamento, mascaramento), Dataplex (lakes, zonas, catálogo, linhagem, qualidade), Cloud Storage, Pub/Sub, Dataproc, Composer/Airflow, Cloud DLP, IAM. * Infraestrutura como Código: Terraform (ou equivalente) para provisionamento e gerenciamento em escala da infraestrutura de dados no GCP. * Programação: Forte conhecimento em Python e SQL; capacidade de escrever código limpo, testável e mantível para pipelines de dados e automações. * Modelagem de dados: Profundo entendimento de modelagem dimensional, origem de eventos, CDC, dimensões com mudança lenta, contratos de dados e evolução de esquemas. * CI/CD para dados: Experiência com testes automatizados, pipelines de implantação, controle de versão (Git) e gestão de lançamentos para produtos de dados. * Ferramentas de qualidade e observabilidade de dados: Great Expectations, dbt, Data Quality do Dataplex, OpenLineage ou similares. ### **Conhecimentos em governança e conformidade** * + Entendimento de regulamentações de privacidade de dados (LGPD, GDPR) e como implementar controles técnicos: classificação de dados, mascaramento, anonimização, retenção, trilhas de auditoria. + Experiência com ferramentas e técnicas de Prevenção de Perda de Dados (DLP): varredura, tokenização, redação e desidentificação. + Familiaridade com modelos de Data Mesh ou governança federada: propriedade por domínio, dados como produto, plataformas de autoatendimento e governança como guardrails (não como portões). #### **Pontos extras** Experiência com migrações Azure/Databricks* para GCP, especialmente governança e correção de custos durante a migração. * Conhecimento em governança de ML: feature stores, linhagem de modelos, rastreamento de experimentos, monitoramento de modelos e práticas de IA responsável. * Contribuições para frameworks abertos de governança ou qualidade de dados (Great Expectations, pacotes dbt, OpenLineage, Amundsen, Datahub, etc.). * Experiência com certificação FinOps ou programas formais de FinOps (gestão de custos em nuvem, previsão orçamentária, estratégias de otimização). * Experiência em auditorias de conformidade ou programas corporativos de governança de dados (ISO 27001, SOC 2, PCI-DSS). ### **Por que se juntar a nós** Você fará parte de uma empresa com ambições globais e uma equipe de Dados altamente motivada em um ponto crítico de inflexão: migração para uma pilha em nuvem moderna e construção da governança, disciplina de custos e cultura de capacitação que escalará pelos próximos anos. Aqui, você não apenas implementará ferramentas — você projetará os fundamentos de como a Blip governa, otimiza e democratiza seus dados. Você trabalhará diretamente com os Serviços Profissionais do Google Cloud, moldará padrões corporativos e capacitará dezenas de engenheiros e analistas a construírem com mais rapidez, segurança e inteligência. Essa é uma oportunidade rara de ser o "engenheiro de governança" que faz com que a governança seja amada, não temida. **Informações adicionais** -------------------------- **Vantagens e benefícios** **Sua Experiência no Dia a Dia** * **Horário Flexível**: Mais autonomia para organizar sua rotina com equilíbrio e responsabilidade. * **Modelos de Trabalho Flexíveis**: Remoto, híbrido ou presencial, conforme a necessidade da função. * **No Dress Code**: Liberdade para ser quem você é, sem formalidades. * ️ **Auxílio Home Office e Blip Setup**: Suporte financeiro para montar (ou melhorar) seu espaço de trabalho remoto. * **Day Off de Aniversário**: Um dia de folga no mês do seu aniversário para comemorar como quiser. * **Blip Recharge:** São 5 dias de folga remunerada por ano, para cargos que não fazem registro de ponto, pensados para equilibrar a jornada. **Bem-estar e Qualidade de Vida** * ️ **Vale Alimentação ou Refeição**: R$ 1144,00 mensais, sem desconto e creditado inclusive nas férias e licenças. * **Beneflex**: Valor mensal creditado em saldo livre, permitindo flexibilidade total de uso, de acordo com suas necessidades. * **Vale Transporte**: Disponível conforme necessidade de deslocamento. * ️‍ **Wellhub (Gympass)**: Acesso a academias, apps de bem-estar e atividades físicas, também para dependentes. * **Convênio SESC**: Acesso à cultura, lazer, esportes, hotéis, colônia de férias e mais. **Saúde Física e Emocional** * **Plano de Saúde (Amil)**: Cobertura nacional, quarto privativo para você e seus dependentes, com desconto apenas de coparticipação. * **Plano Odontológico**: Cobertura nacional para você e seus dependentes, com três opções de planos, e desconto integral do valor do plano escolhido. * **Conexa Saúde**: Pl