Descrição
Resumo:
Como Engenheiro de Software especializado no Apache Airflow, você construirá e gerenciará a orquestração de pipelines de dados complexos para garantir a entrega confiável de dados e impulsionar a tomada de decisões orientada por dados.
Pontos principais:
1. Projetar, desenvolver e manter DAGs complexos para orquestração de dados
2. Colaborar com engenheiros de dados e analistas em fluxos de trabalho automatizados
3. Implementar as melhores práticas para código de orquestração usando Python
Na BairesDev®, lideramos projetos de tecnologia há mais de 15 anos. Entregamos soluções de ponta para gigantes como o Google e para as startups mais inovadoras do Vale do Silício.
Nossa equipe diversificada, composta por mais de 4.000 profissionais — os 1% melhores do mundo em tecnologia — trabalha remotamente em funções que geram impacto significativo em todo o mundo.
Ao se candidatar a esta posição, você dá o primeiro passo em um processo que vai além do convencional. Buscamos alinhar suas paixões e habilidades às nossas vagas, colocando-o em um caminho rumo ao desenvolvimento e sucesso profissional excepcionais.
Como Engenheiro de Software especializado no Apache Airflow, você construirá e gerenciará a orquestração de pipelines de dados complexos para garantir a entrega confiável de dados. Você atuará na interseção entre engenharia de dados e automação, projetando fluxos de trabalho escaláveis que impulsionam a tomada de decisões orientada por dados da organização.
O que você fará:
* Projetar, desenvolver e manter Grafos Acíclicos Direcionados (DAGs) complexos para orquestrar movimentação e transformação de dados.
* Gerenciar dependências entre tarefas e lógica de agendamento para garantir processamento de dados oportuno e preciso em diversos sistemas.
* Monitorar a execução dos fluxos de trabalho e implementar alertas proativos para identificar e resolver falhas nos pipelines ou gargalos de desempenho.
* Otimizar a infraestrutura do Airflow e as configurações de operadores para lidar com volumes crescentes de dados e requisitos de concorrência.
* Colaborar com engenheiros de dados e analistas para traduzir requisitos de negócios em fluxos de trabalho automatizados eficientes.
* Implementar as melhores práticas para controle de versão, testes e implantação de código de orquestração usando Python.
O que buscamos:
* 4+ anos de experiência em Engenharia de Dados, Engenharia de Software ou área relacionada, com foco em orquestração de dados.
* Experiência comprovada na construção e gerenciamento de orquestração escalável de pipelines de dados usando Apache Airflow.
* Domínio na concepção e desenvolvimento de DAGs complexos e no tratamento eficaz de dependências entre tarefas.
* Sólida experiência em programação Python especificamente voltada à automação e orquestração de fluxos de trabalho de dados.
* Experiência prática em monitoramento da execução de fluxos de trabalho e resolução de problemas de desempenho nos pipelines.
* Proficiência avançada em inglês.
Como facilitamos seu trabalho (e sua vida):
* Trabalho 100% remoto (de qualquer lugar).
* Excelente remuneração em USD ou na moeda local, se preferir.
* Configuração de hardware e software para você trabalhar de casa.
* Horários flexíveis: crie sua própria agenda.
* Licenças remuneradas para maternidade/paternidade, férias e feriados nacionais.
* Ambiente de trabalho inovador e multicultural: colabore e aprenda com os 1% melhores talentos globais em tecnologia.
* Ambiente de apoio com mentoria, promoções, desenvolvimento de habilidades e diversas oportunidades de crescimento.
Junte-se a uma equipe global onde seus talentos únicos podem realmente prosperar e causar um impacto significativo!
Candidate-se agora!