Descrição
Resumo da Vaga:
Este profissional construirá e evoluirá pipelines de dados em ambiente cloud AWS, desenvolvendo soluções e visualizações para apoiar a definição de métricas e indicadores de negócio.
Principais Destaques:
1. Construir e evoluir pipelines de dados em ambiente cloud AWS
2. Desenvolver e manter pipelines utilizando Databricks (PySpark e SQL)
3. Atuar próximo às áreas de negócio, traduzindo necessidades em soluções
.
**Responsabilidades e atribuições**
* Construir e evoluir pipelines de dados em ambiente cloud AWS;
* Desenvolver e manter pipelines utilizando Databricks (PySpark e SQL);
* Estruturar dados em arquitetura moderna (Data Lake / Lakehouse – camadas Bronze, Silver e Gold);
* Realizar ingestão, transformação e análise de grandes volumes de dados;
* Integrar dados com serviços AWS como S3, Glue, Athena e Lambda;
* Criar consultas avançadas em SQL para exploração e análise de dados;
* Desenvolver dashboards e visualizações (Databricks SQL ou Power BI);
* Apoiar na definição e evolução de métricas e indicadores de negócio;
* Atuar próximo às áreas de negócio, traduzindo necessidades em soluções de dados;
* Garantir qualidade, governança e consistência dos dados;
* Automatizar rotinas e processos de dados.
**Requisitos e qualificações**
* Experiência sólida com Databricks;
* Experiência com serviços de dados na cloud AWS;
* Domínio de SQL avançado;
* Experiência com Python (PySpark) para processamento de dados;
* Vivência com arquitetura moderna de dados (Data Lake / Lakehouse);
* Experiência em modelagem de dados e construção de pipelines;
* Forte capacidade analítica e pensamento estruturado;
* Experiência na geração de insights a partir de dados estruturados e não estruturados.
A Invillia faz parte da AI/R, a AI Revolution Company: uma conexão estratégica de componentes revolucionários incorporando a inteligência artificial em todos os lugares.
A AI/R conta com mais de 6\.000 profissionais de tecnologia e presença global, com escritórios no Brasil, na Europa e nos EUA.