Pessoa engenheira de dados

Descrição

Resumo da Vaga: Procuramos um profissional com profundo conhecimento em arquiteturas de dados escaláveis e seguras, atuando na co-criação de soluções de valor em ambientes AWS e GCP. Principais Destaques: 1. Experiência com AWS e GCP em arquiteturas escaláveis e seguras 2. Sólida experiência em ETL/ELT, modelagem e orquestração de dados 3. Foco em projetar soluções escaláveis, performáticas e confiáveis Descrição: * Profundo conhecimento em AWS e Google Cloud Platform (GCP), com experiência prática em arquiteturas escaláveis e seguras; * Experiência sólida com processos de ETL/ELT, modelagem de dados, ingestão, transformação e orquestração; * Capacidade de projetar soluções escaláveis, mantendo performance e confiabilidade; * Habilidade de comunicação técnica e estratégica para interagir com diferentes áreas; * Interesse em se aproximar de áreas estratégicas para co\-criar soluções que gerem valor real. Ferramentas e Tecnologias * Integração de dados: Pentaho, Debezium, Apache Airflow; * Automação e manipulação: Shell Script e Python; * Visualização e monitoramento: Power BI e Grafana; * Bancos de dados: PostgreSQL, MySQL, MongoDB, DynamoDB, Redis e outros. Será um diferencial. * Experiência com bancos de dados não relacionais como: HBase, DynamoDB, Cassandra ou MongoDB; * Conhecimentos em Governança de Dados; * Experiência com ecossistema Hadoop (HDFS, HBase, MapReduce, Apache Spark, Apache Hive); * Conhecimento em ferramentas de provisionamento de infraestrutura em cloud via código tais como: Terraform, cloudformation; * Conhecimento de metodologias ágeis, em especial Scrum e Kanban. * Projetar, desenvolver e manter arquiteturas de dados escaláveis e eficientes para suportar as necessidades de análise e processamento de dados da empresa; * Atuar na arquitetura e implementação de Data Warehouses, Data Lakes e Data Marts, utilizando Parquet, Delta Lake e boas práticas de governança; * Orquestrar fluxos de dados com Pentaho, Apache Airflow e Glue, além de modelar transformações com DBT; * Integrar e transformar dados de múltiplas fontes usando Pentaho, Python e Shell Script; * Garantir a qualidade, segurança e performance dos dados em ambientes AWS e GCP; * Trabalhar com bancos de dados relacionais (PostgreSQL, MySQL) e não relacionais (MongoDB, Redis, DynamoDB, etc.); * Criar dashboards e monitoramentos com Power BI e Grafana; * Colaborar com DBAs, Analistas de Dados e times de negócio para entender necessidades e propor soluções de alto impacto; * Participar da definição de padrões técnicos e boas práticas de engenharia de dados. 251111020218116084