Senior Data Engineer (Especialista em Azure/ Databricks)

Descrição

Resumo da Vaga: Procuramos talentos para atuar na construção e manutenção de pipelines de dados, desenvolvimento ETL/ELT e gestão de Data Lake em um ambiente dinâmico e orientado a dados. Principais Destaques: 1. Construir e manter pipelines de ingestão e processamento de dados 2. Desenvolver processos ETL/ELT com Python, Apache Airflow e Azure Data Factory 3. Colaborar com times multidisciplinares em ambiente dinâmico ***A Keyrus acredita na diversidade e na inclusão. Encorajamos a todos a participarem em nosso processo de contratação, não importando o gênero, idade, raça, religião. Não permitimos nenhum tipo de discriminação. Isto é reforçado no processo de contratação e vivido dessa forma na empresa.*** Sabemos que grandes resultados só são alcançados com uma grande equipe, por isso procuramos pessoas talentosas e apaixonadas, com desejo de crescer profissionalmente e criar uma trajetória de carreira conosco. **Papéis e Responsabilidades:** * Construir e manter **pipelines de ingestão e processamento de dados** a partir de múltiplas fontes. * Desenvolver processos de **extração, transformação e carga (ETL/ELT)** utilizando **Python, Apache Airflow e Azure Data Factory**. * Estruturar e gerenciar dados em **Data Lake**, garantindo organização e governança das informações. * Atuar no desenvolvimento de transformações e processamento de dados utilizando **Spark / SparkSQL em Databricks**. * Suportar, monitorar e evoluir a **plataforma de dados do cliente**, garantindo estabilidade e performance. * Trabalhar com diferentes **bancos de dados e tecnologias de armazenamento**, como SQL Server, Oracle, MongoDB e Hadoop. * Colaborar com times multidisciplinares em um ambiente dinâmico e orientado a dados. **Qualificações Essenciais:** * Experiência sólida com **Azure Databricks**. * Conhecimento em **Azure Data Factory** e **Azure Data Lake**. * Experiência em desenvolvimento com **Python**. * Conhecimento em **Apache Spark / SparkSQL**. * Experiência com **bancos de dados Oracle e SQL Server**. **Serão considerados Diferenciais:** * Experiência com **metodologias ágeis (Scrum ou Kanban)**. * Conhecimento em **Git / Azure DevOps**. * **Certificações em Cloud**, preferencialmente **Microsoft Azure**. * **Inglês** para leitura e comunicação em ambiente técnico. Nossa missão é Auxiliar as empresas a extrair todo o potencial de Dados e Digital objetivando aumentar seu desempenho, ajudando na transformação, gerando novas alavancas de crescimento e competitividade. Vem fazer parte do Time Keyrus! Se você quiser saber mais sobre nós, convidamos você a visitar nosso site: http://www.keyrus.com/br/ ***Desejamos boa sorte!***