Engenheiro Líder de Software de Dados

Descrição

Estamos buscando um **Engenheiro Líder de Software de Dados** para colaborar estreitamente com nosso cliente e moldar soluções de dados resilientes e escaláveis do início ao fim. Você liderará o design e a manutenção de pipelines ETL/ELT, além de plataformas em lote e em fluxo contínuo, orientando as práticas de entrega e a qualidade técnica ao longo do ciclo de vida — candidate-se agora. **Responsabilidades** * Arquitetar e manter a base de código para pipelines ETL e ELT, processamento em lote/micro-lote de grande escala e sistemas em fluxo contínuo * Construir a infraestrutura necessária para extração, transformação e carregamento eficientes de dados provenientes de diversas fontes, utilizando ADF, Spark, Kafka ou tecnologias semelhantes * Identificar, projetar e implementar melhorias nos processos internos, incluindo automação de tarefas manuais, otimização da entrega de dados e redesenho da infraestrutura para escalabilidade * Projetar e implementar soluções inovadoras de serviços de dados usando Spring Boot, ReactJS, NoSQL ou outras tecnologias relacionadas a interfaces e APIs * Garantir a governança dos processos ao longo da gestão de entrega e da produção, alinhada ao modelo de entrega selecionado * Assumir temas relacionados à entrega perante a alta administração e partes interessadas, incluindo escalonamentos, vendas adicionais (upsells) e redução de recursos (ramp-downs) * Fornecer liderança técnica na entrega, planejando uma arquitetura sólida e preparada para o futuro, garantindo que a implementação atenda aos padrões de qualidade técnica * Escrever histórias e os respectivos critérios de aceitação dentro de um fluxo de trabalho ágil/scrum * Coordenar esforços entre múltiplas disciplinas e partes interessadas * Garantir que os projetos sigam os processos e metodologias do cliente, com forte foco em abordagens ágeis * Estabelecer uma estratégia de gerenciamento contínuo de riscos na entrega para permitir decisões e ações proativas ao longo do ciclo de vida da entrega * Medir e melhorar a produtividade da entrega, consultar Engenheiros de Dados e executar atividades de suporte à produção e implantação **Requisitos** * 5 anos ou mais de experiência em SQL, Spark e Scala * Expertise avançada em Databricks * Sólida experiência no projeto e entrega de pipelines ETL/ELT e sistemas de processamento em lote/micro-lote de grande escala * Experiência prática com soluções de serviços de dados usando Spring Boot, ReactJS, NoSQL ou outras tecnologias relacionadas a interfaces e APIs * Bom entendimento do fluxo de trabalho ágil/scrum e de diferentes modelos de entrega * Capacidade comprovada de fornecer liderança técnica e atuar como consultor para Engenheiros de Dados * Proficiência em inglês no nível B2 (intermediário superior) ou superior para comunicação direta com o cliente **Desejável** * Experiência com Spark Streaming e Kafka * Familiaridade com Azure **Oferecemos** * Projetos internacionais com marcas líderes * Trabalho com equipes globais altamente qualificadas e diversas * Benefícios de saúde * Programas financeiros para funcionários * Licença remunerada e licença médica * Cursos de atualização profissional (upskilling), reconversão profissional (reskilling) e certificações * Acesso ilimitado à biblioteca do LinkedIn Learning e a mais de 22.000 cursos * Oportunidades de carreira globais * Oportunidades de voluntariado e envolvimento comunitário * Grupos de funcionários da EPAM * Cultura premiada, reconhecida pelo Glassdoor, Newsweek e LinkedIn