Descrição
**Sobre a vaga**
Estamos procurando um **Engenheiro de Dados Sênior** para assumir a responsabilidade pela ingestão, orquestração de pipelines e arquitetura da Fonte Única de Verdade (SSoT) para novos módulos de produto. Você construirá pipelines de dados empacotados em contêineres na AWS, integrará diretamente com APIs de IA e gerenciará o ciclo de vida dos dados, desde a extração até os testes de aceitação do usuário. Essa posição exige grande autonomia, pois opera sem suporte dedicado de QA durante a fase inicial de desenvolvimento.
**Suas responsabilidades**
* Construir os principais pipelines de ingestão para extrair métricas de alto volume da YouTube Data API, YouTube Creator API, Google Trends e Later Social para o SSoT na AWS S3/Glue/Athena.
* Escrever e manter workers em Python empacotados em contêineres (RQ/Celery com Redis) no EKS para processamento de dados.
* Trabalhar diretamente com a camada de LLM Bedrock e SDKs internos para garantir que os dados fluam perfeitamente para a camada de orquestração/pontuação de IA.
* Estender SDKs Python existentes (por exemplo, gads\-audience\-insights) para cobrir novos serviços, como o ContentCreatorInsightsService.
* Assumir a responsabilidade pelos Testes de Aceitação do Usuário (UAT) na camada de dados, assegurando alta qualidade e identificando casos extremos sem depender de uma equipe de QA dedicada.
* Trabalhar em conjunto com as equipes internas de DevOps/plataforma da Kepler para CI/CD (GitHub Actions, ArgoCD) e IaC (Terraform), adaptando-se rapidamente aos seus padrões internos.
**Requisitos obrigatórios**
* **5 anos ou mais de experiência sólida em Engenharia de Dados ou Desenvolvimento Backend**, com forte foco em pipelines e infraestrutura de dados.
* Habilidades **avançadas em Python**, especialmente na construção de microsserviços e workers empacotados em contêineres (ECS/EKS).
* Experiência profunda com **infraestrutura de dados da AWS**, especificamente S3, AWS Glue e Amazon Athena.
* Experiência prática comprovada na integração de APIs de IA (especificamente **AWS Bedrock, Claude ou Gemini**) e no tratamento de fluxos externos intensivos de dados.
* Alto nível de conforto ao trabalhar em ambiente de terminal Mac/Linux (Bash, Makefiles).
* Excelentes habilidades de comunicação e entrevista; você deve ser capaz de defender com segurança suas escolhas técnicas e aprovar uma entrevista técnica rigorosa e exigente.
* Extrema pragmatismo e paciência ao lidar com dependências entre equipes (por exemplo, aguardar a equipe de DevOps do cliente para obter acesso ou provisionamento).
* Domínio de ferramentas de desenvolvimento assistido por IA e fluxos de codificação agêntica para acelerar a produtividade de engenharia.
* Nível de inglês intermediário\-avançado.
**Desejável**
* Experiência com Auth0 e openfga para implementação de ReBAC/RBAC.
* Experiência em pipelines específicos de marketing, construção de públicos-alvo, fornecimento de métricas e obtenção de dados para Analytics/BI.
**Benefícios e vantagens**
* **Crescimento sem limites:** desenvolva suas habilidades por meio de mentoria, TechTalks internos, projetos desafiadores e orçamento anual dedicado para aprendizado.
* **Remuneração competitiva:** receba reconhecimento condizente com suas habilidades e impacto, com avaliações regulares de desempenho e remuneração.
* **Flexibilidade:** trabalhe 100% remotamente com horários flexíveis que favorecem concentração, autonomia e um ritmo saudável de trabalho.
* **Projetos significativos e modernos:** construa produtos com impacto utilizando tecnologias modernas, em colaboração com equipes globais e marcas líderes.
* **Cultura colaborativa:** junte-se a um ambiente de apoio, sem microgestão, onde ideias são bem-vindas e contribuições são reconhecidas.
* **Bem\-estar e suporte:** acesse programas locais de bem-estar e suporte centrado nas pessoas, adaptados à sua localidade.
Tipo de vaga: Integral
Local de trabalho: Remoto