Engenheiro de Dados

Descrição

Somos a **Credsystem**. E há mais de 20 anos, criamos oportunidades para você conquistar cada vez mais. Lado a lado com quem faz o varejo acontecer todos os dias, nos tornamos especialistas em seu negócio. Cultivamos relações e abrimos caminhos para o sucesso. Tudo pra você se aproximar do seu cliente. De um jeito descomplicado, aberto e real. Estamos **inovando** sempre para buscar diferentes soluções e oferecer novas possibilidades para o varejo. Com agilidade, tecnologia e renovação, por dentro e por fora. Quem disse que não dá pra resolver simples pensando grande? Inovar trabalhando com o que a gente já sabe? Crescer no futuro valorizando o presente? **Vem tornar novas conquistas possíveis com a gente!** **Responsabilidades e atribuições** **E o seu dia a dia como será?** Buscamos um profissional sênior em engenharia de dados com implantação de projetos complexos utilizando Databricks. **Principais Responsabilidades e Escopo:** * Desenvolvimento de Pipelines de Dados: Criar e manter processos ETL (Extração, Transformação e Carga) para mover dados de fontes diversas para armazéns de dados (Data Warehouses/Data Lakes). * Infraestrutura e Banco de dados: Projetar e implementar bancos de dados escaláveis (relacionais e NoSQL), garantindo segurança, desempenho e a integridade da informação. * Big Data e Processamento Distribuído: Gerenciar grandes volumes de dados utilizando ferramentas de processamento distribuído, essencial para empresas com alto volume de informações. * Cloud Computing e Automação: Implementar soluções na nuvem (AWS, Azure, GCP) e automatizar fluxos de trabalho (IaC/DevOps). * Colaboração e Estruturação: Atuar com equipes de análise para entender necessidades de negócio, garantindo que os dados estejam prontos para dashboards e modelos de IA. **Requisitos e qualificações** **O que esperamos de você?** Alta proficiência em Spark, Delta Tables, Python, SQL e Git, com experiência sólida em Databricks. Certificação Databricks Professional, conhecimento em DABs, DLT, Spark Structured Streaming, Delta Sharing e MLFlow, experiência com configuração de agentes usando LangChain ou frameworks similares em Python, além de vivência no setor financeiro. **Informações adicionais** Empresa localizada no Alphaville \- Barueri **Modelo Remoto** Estamos sempre focados em proporcionar a melhor experiência para os nossos Credsysters: **Conheça um pouco mais:** Vale\-refeição e alimentação. Assistência Médica (para você e seus dependentes). Assistência Odontológica (para você e seus dependentes). Duas consultas mensais com psicólogo (sem nenhuma cobrança). Consulta com nutricionista (por conta da Credsystem). Gympass (para você cuidar da sua saúde e bem\-estar). Momento bem\-estar (sessões semanais de massagem para você manter seu corpo relaxado). Seguro de Vida. Remuneração variável, de acordo com seu cargo e atingimento de metas. Desconto em universidades (para ir mais longe na sua carreira). Parceria em escola de idioma (para você desenvolver e aprimorar uma segunda língua). Day\-off de Aniversário. Empréstimo Consignado. Vale\-Transporte, Fretado ou Estacionamento. Auxílio Creche. Sesc. Quem disse que não dá pra resolver simples pensando grande? Inovar trabalhando com o que a gente já sabe? Crescer no futuro valorizando o presente? Somos a **credsystem**. E há mais de 20 anos, criamos oportunidades para você conquistar cada vez mais. Cultivamos relações e abrimos caminhos para o sucesso. De um jeito descomplicado, aberto e real. Trabalhamos para tornar novas conquistas possíveis todos os dias. E queremos você ao nosso lado nessa jornada! **Bora conhecer nossas oportunidades?**