Descrição
Resumo:
Procuramos um Engenheiro Senior DevOps para aprimorar a confiabilidade e escalabilidade das plataformas de dados de anúncios, gerenciando AWS/Kubernetes, otimizando CI/CD e supervisionando pipelines de dados.
Pontos principais:
1. Conduzir a excelência operacional para plataformas de dados de anúncios
2. Gerenciar infraestrutura AWS e Kubernetes com Terraform
3. Otimizar pipelines CI/CD com Spinnaker e Jenkins
Estamos aprimorando a confiabilidade e escalabilidade das plataformas de dados de anúncios e contratando um Engenheiro Senior DevOps para impulsionar a excelência operacional. Você gerenciará a infraestrutura AWS e Kubernetes com Terraform, dará suporte a pipelines baseados em Airflow\-MWAA e otimizará CI/CD com Spinnaker e Jenkins; candidate-se ainda hoje.
**Responsabilidades**
* Supervisionar e melhorar pipelines de processamento de dados construídos com Airflow/MWAA, Spark e Flink
* Construir e operar infraestrutura na AWS usando Kubernetes e Terraform
* Envolver partes interessadas para alinhar requisitos e comunicar atualizações de infraestrutura
* Realizar manutenção, atualizações e resolução de incidentes em plataformas de dados com monitoramento via Datadog e garantia de desempenho
* Refinar pipelines CI/CD usando Spinnaker e Jenkins para assegurar lançamentos contínuos e consistentes
**Requisitos**
* Histórico comprovado de 3\+ anos em função DevOps ou Data DevOps
* Excelente conhecimento em Amazon Web Services (AWS) para operações e administração em nuvem
* Experiência prática com Apache Airflow para construção e gerenciamento de orquestração de fluxos de trabalho
* Sólida experiência com Kubernetes para implantação e orquestração de contêineres
* Domínio avançado do Terraform para provisionamento automatizado de infraestrutura
* Habilidades de comunicação em inglês no nível B2 (Intermediário\-Avançado) ou superior para colaboração e documentação
**Desejável**
* Exposição ao Apache Flink para cargas de trabalho de streaming de dados
* Experiência com Apache NiFi para automação e projeto de pipelines de dados
* Conhecimento prático de Databricks para análise avançada e operações de aprendizado de máquina
* Familiaridade com Datadog para monitoramento, diagnóstico e solução de problemas de desempenho