ENGENHEIRO DE DADOS SR

Descrição

Resumo da Vaga: O profissional irá atuar no desenvolvimento e otimização de extração de dados, criação de pipelines de dados utilizando AWS, e implementação de fluxos de dados em tempo real. Principais Destaques: 1. Desenvolvimento e otimização de extração de dados via Remote API. 2. Criação de pipelines de dados utilizando o ecossistema AWS para telemetria. 3. Implementação de fluxos de dados em tempo real com AWS Lambda e Kinesis. **Descrição da Vaga:** ---------------------- Desenvolver e otimizar a extracao de dados via Remote API de uma plataforma de telemetria. Desenvolver pipelines de dados utilizando o ecossistema AWS para processar eventos de rastreamento (ignicao, sensores, geofences). Estruturar o armazenamento em Amazon S3 (camadas Bronze, Silver, Gold); Modelagem em Amazon Redshift ou Athena para consumo de BI. Implementar fluxos de dados em tempo real utilizando AWS Lambda e Amazon Kinesis (ou MSK/Kafka) para alertas imediatos. Criar e monitorar orquestradores de dados (Ex: AWS Step Functions ou Managed Workflows for Apache Airflow \- MWAA). **Requisitos Indispensáveis:** ------------------------------ Superior Completo Ciência da Computação, Engenharia de Computação, Engenharia de Software, Engenharia de Dados ou áreas afins. Experiência em integração com a API Remote ou Data Service. AWS Core: Experiência prática com S3, Lambda, Glue, Athena e Redshift. Linguagens: Python (PySpark/Pandas) e SQL Avançado. Bancos de Dados: Experiência com bancos relacionais (RDS/PostgreSQL) e noções de NoSQL (DynamoDB) para logs de rastreamento. Integrações: Experiência com APIs RESTful e manipulação de arquivos JSON/XML. **Requisitos Desejáveis:** -------------------------- Certificação AWS Certified Data Engineer ou Solutions Architect. Experiência com IoT Core da AWS para comunicação direta com sensores. Conhecimento em ferramentas de visualização (QuickSight, Power BI ou Tableau) conectadas à AWS. Noções de infraestrutura como código (Terraform ou CloudFormation). Conhecimento em algum nível de plataformas de Telemetria. **Regime de Contratação:** -------------------------- CLT **PCD:** -------- INDIFERENTE **Benefícios:** --------------- Convênio Farmácia \- Golden Farma Saúde e Bem Estar \-TotalPass Vale Combustível ou Vale Transporte Vale Refeição e Vale Alimentação Assistência Médica e Assistência Odontológica; Auxílio Educação (Graduação, Pós e MBA) Convênio com SESC Parceria com Escola de Idiomas Parceria Colégio para Filhos de Funcionário Café da manhã **Local do Trabalho:** ---------------------- 1 **Informações Adicionais:** --------------------------- Presencial