Resumo: Estamos buscando um Engenheiro Líder de DevOps para aprimorar a confiabilidade e escalabilidade da infraestrutura de dados da nossa Organização de Anúncios, entregando atualizações, otimizando CI/CD e coordenando com partes interessadas. Pontos principais: 1. Melhorar a confiabilidade e escalabilidade da infraestrutura de dados 2. Otimizar fluxos de trabalho de CI/CD e solucionar problemas em produção 3. Coordenar com partes interessadas e lançar sistemas estáveis Estamos procurando um Engenheiro Líder de DevOps para melhorar a confiabilidade e escalabilidade da infraestrutura de dados da nossa Organização de Anúncios. Você solucionará problemas em produção, entregará atualizações e manutenção, e otimizará fluxos de trabalho de CI/CD, ao mesmo tempo que coordena com partes interessadas. Candidate-se para nos ajudar a lançar sistemas estáveis com forte observabilidade **Responsabilidades** * Supervisionar e otimizar operações de processamento de dados usando Airflow/MWAA, Spark e Flink * Criar e manter infraestrutura em nuvem com AWS, Kubernetes e Terraform * Engajar partes interessadas para coletar requisitos e comunicar o progresso das alterações na infraestrutura * Planejar e executar atualizações, realizar manutenção e solucionar problemas em plataformas de dados, utilizando Datadog para monitoramento e insights de desempenho * Aprimorar a entrega de CI/CD ao aprimorar os pipelines do Spinnaker e do Jenkins para liberações consistentes **Requisitos** * Histórico comprovado de 5\+ anos em funções de engenharia DevOps * Experiência comprovada de 1\+ ano em responsabilidades de liderança ou gestão de equipes * Conhecimento profundo da Amazon Web Services (AWS) para implantar, gerenciar e operar infraestrutura em nuvem * Experiência prática com Apache Airflow para orquestrar e agendar fluxos de trabalho de dados * Conhecimento avançado de Kubernetes para gerenciar e dimensionar aplicações em contêineres * Grande proficiência em Terraform para automação e configuração de infraestrutura * Nível de inglês B2 (Intermediário Superior) ou superior, com fortes habilidades de comunicação para colaboração e relatórios **Desejável** * Experiência com Apache Flink para processamento em tempo real de fluxos de dados * Familiaridade com Apache NiFi para automatizar e controlar fluxos de dados * Conhecimento de Databricks para análises avançadas e esforços de aprendizado de máquina * Experiência com Datadog para monitoramento da infraestrutura e resolução de problemas