Resumo: Engenheiro Líder de DevOps para garantir a confiabilidade e o crescimento da infraestrutura de dados em escala, atualizando plataformas, solucionando problemas em produção e otimizando pipelines de CI/CD. Pontos principais: 1. Conduzir e otimizar operações de processamento de dados em Airflow, Spark e Flink 2. Projetar e manter infraestrutura em nuvem da AWS usando Kubernetes e Terraform 3. Fortalecer a automação de CI/CD aprimorando os pipelines do Spinnaker e do Jenkins Estamos contratando um Engenheiro Líder de DevOps para garantir a confiabilidade e o crescimento da infraestrutura de dados da nossa Organização de Anúncios em escala. Neste cargo, você atualizará plataformas, solucionará problemas em produção e otimizará pipelines de CI/CD, colaborando de perto com as partes interessadas. Candidate-se agora para construir práticas confiáveis de entrega e monitoramento. **Responsabilidades** * Conduzir e otimizar operações de processamento de dados em Airflow/MWAA, Spark e Flink * Projetar e manter infraestrutura em nuvem da AWS usando Kubernetes e Terraform * Coordenar-se com as partes interessadas para levantar requisitos e fornecer visibilidade sobre alterações na infraestrutura * Realizar atualizações, manutenção rotineira e solução de problemas de causa raiz em plataformas de dados com monitoramento Datadog e insights de desempenho * Fortalecer a automação de CI/CD aprimorando os pipelines do Spinnaker e do Jenkins para lançamentos confiáveis **Requisitos** * Experiência extensa em engenharia DevOps, incluindo 5\+ anos em funções semelhantes * Exposição prática à liderança, com 1\+ ano orientando uma equipe ou assumindo responsabilidade pelos resultados de entregas * Excelente conhecimento em Amazon Web Services (AWS) para implantação e operação de infraestrutura em nuvem * Experiência prática com Apache Airflow para orquestração e agendamento de pipelines de dados * Conhecimento especializado em Kubernetes para gerenciar e dimensionar aplicações em contêineres * Competência sólida em Terraform para automatizar infraestrutura e gerenciar configurações * Proficiência em inglês no nível B2 (Intermediário Superior) ou superior para colaborar eficazmente e relatar com clareza **Desejável** * Experiência com Apache Flink para processamento em tempo real de fluxos de dados * Conhecimento prático de Apache NiFi para automação e controle de fluxos de dados * Familiaridade com Databricks para cargas de trabalho avançadas de análise e aprendizado de máquina * Uso prático do Datadog para monitoramento da infraestrutura e resolução de problemas