Engenheiro Data Lake

Descrição

Resumo da Vaga: Buscamos um(a) especialista em Data Lake para atuar na estruturação, organização e governança de dados, garantindo um ecossistema confiável, escalável e seguro. Principais Destaques: 1. Atuação na estruturação, organização e governança de dados 2. Desenvolvimento de pipelines de ingestão e transformação de dados 3. Trabalho com armazenamento em nuvem (AWS S3, Azure Data Lake, GCP) Estamos em busca de um(a) profissional especialista em Data Lake para atuar na estruturação, organização e governança dos dados da empresa. A pessoa será responsável por garantir que o ecossistema de dados seja confiável, escalável e seguro — apoiando times de BI, Analytics e Produto na tomada de decisão baseada em dados. **Principais responsabilidades:** . Projetar, implementar e manter pipelines de ingestão e transformação de dados para o Data Lake; . Integrar fontes de dados internas e externas de forma automatizada e segura; . Trabalhar com armazenamento em nuvem (AWS S3, Azure Data Lake, GCP Storage); . Implementar boas práticas de governança, versionamento e qualidade de dados; . Apoiar times de BI e Analytics na disponibilização de dados confiáveis; . Monitorar performance, custos e segurança do ambiente de dados. **Requisitos:** . Experiência com Data Lake em nuvem (AWS, Azure ou GCP); . Domínio em ETL/ELT e ferramentas como Apache Airflow, Glue, Databricks ou similar; . Conhecimento em Python e SQL avançado; . Vivência com armazenamento de dados não estruturados (JSON, Parquet, Avro, etc.); . Experiência com arquitetura de dados, modelagem e integração; . Noções de segurança, governança e custos em cloud. **Diferenciais:** . Experiência com Data Mesh ou Data Governance frameworks; . Conhecimento em Kafka (streaming de dados em tempo real); . Certificações em AWS / Azure / GCP Data; . Experiência em ambientes corporativos complexos ou escaláveis.