Engenheiro de Infraestrutura de Dados

Descrição

Resumo: Buscamos um Engenheiro de Infraestrutura de Dados altamente técnico e prático para construir plataformas robustas e escaláveis de infraestrutura de dados utilizando software de código aberto no Amazon EKS. Pontos principais: 1. Construir plataformas robustas e escaláveis de infraestrutura de dados utilizando software de código aberto 2. Implantar e gerenciar tecnologias de dados de alto desempenho no Amazon EKS 3. Projetar e implementar soluções técnicas inovadoras e de alto risco **Sobre a Metal Toad** A Metal Toad é uma Parceira Consultora Avançada da AWS que capacita organizações a inovar por meio de inteligência artificial, migração para a nuvem, otimização de custos e modernização de aplicações. Auxiliamos nossos clientes em sua adoção da nuvem fornecendo arquitetura, migração, otimização, aprendizado de máquina e até suporte 24/7. Somos uma empresa de serviços profissionais que oferece serviços em engenharia de software e nuvem. Prestamos consultoria técnica, programação e garantia de qualidade, DevOps, aplicações, UX, gestão de produtos e gestão de projetos. Para se candidatar a esta vaga, envie seu **currículo em inglês no formato PDF**. **Descrição da vaga** Estamos procurando um Engenheiro de Infraestrutura de Dados altamente técnico e prático para integrar nossa equipe. Esta não é uma função padrão de Engenharia de Dados; em vez disso, você se concentrará na construção de plataformas robustas e escaláveis de infraestrutura de dados utilizando software de código aberto. Sua principal missão será implantar e gerenciar tecnologias de dados de alto desempenho — como Apache Pinot, Apache Druid e Trino — dentro de um ambiente bem arquitetado do Amazon EKS. Você trabalhará em soluções técnicas pioneiras e de alto risco, navegando em ambientes complexos de clientes para entregar infraestrutura de ponta que ultrapassa os limites das implementações convencionais. **Responsabilidades** **Principais responsabilidades** * **Implementação de infraestrutura:** Arquitetar e implantar software de código aberto para dados (OSS) — Trino, Spark, Pinot, Druid — no Amazon EKS. * **Desenvolvimento prático:** Manter uma abordagem 100% prática, utilizando IDEs, Git e rigorosas boas práticas de codificação para gerenciar infraestrutura como código. * **Resolução de problemas:** Navegar hierarquias complexas de clientes e cenários técnicos para identificar, propor e implementar soluções personalizadas. * **Trabalho pioneiro:** Projetar e implementar soluções inovadoras e de alto risco que ainda não foram estabelecidas anteriormente. * **Colaboração:** Atuar como especialista em tecnologias de código aberto, assegurando que todas as implementações sejam bem arquitetadas e prontas para produção. **QUALIFICAÇÕES EXIGIDAS** * Concordar com nossa Declaração de Valores Corporativos. * Acreditar na missão da empresa: *ajudar as pessoas*. * Acreditar nos princípios do código aberto. * Habilidades avançadas a fluentes de comunicação em inglês são essenciais para esta posição. * **Kubernetes/EKS:** Experiência profunda em Kubernetes e Amazon EKS é um **requisito obrigatório**. * **Ferramentas principais de infraestrutura:** Domínio de **Terraform, Helm, Docker** e **Karpenter**. * **Especialização em OSS de dados:** Classificação mínima de 3 (em uma escala de 5 pontos) na implantação e gerenciamento de softwares OSS de dados, incluindo **Trino, Spark ou Pinot**. * **Fundamentos de dados:** Grande familiaridade com Data Lakes, Spark e arquiteturas Hive. * **Versatilidade:** Demonstrada disposição para trabalhar com ecossistemas não baseados na AWS e amplos ecossistemas de código aberto. * **Habilidades interpessoais:** Alto nível de conforto ao interagir com ambientes complexos de clientes e aptidão para resolução de problemas técnicos de alta criticidade. **DESEJÁVEL** * Experiência prática prévia com Fruitstand. * Histórico comprovado de contribuição para ou gerenciamento de projetos complexos de código aberto em ambientes de produção.