Engenheiro de Dados Júnior

Descrição

Resumo: A Dadosfera está buscando um Engenheiro de Dados apaixonado para gerenciar grandes volumes de dados, criar soluções e gerar insights para clientes em um ambiente altamente formativo e autônomo. Pontos de destaque: 1. Gerenciar grandes volumes de dados e gerar insights para clientes 2. Trabalhar com tecnologias de ponta em um ambiente altamente formativo 3. Contribuir para o desenvolvimento de aplicações de dados inovadoras e recursos habilitados por IA **Visão Geral da Empresa** **Dadosfera** está transformando o cenário de dados com uma plataforma que oferece capacidades avançadas de Dados, IA e Analytics — anteriormente disponíveis apenas para gigantes tecnológicos como Meta, Amazon, Alphabet e Microsoft — às pequenas e médias empresas. Ao democratizar o acesso a essas tecnologias, capacitamos nossos clientes a acelerar oportunidades de negócios por meio de Aplicações de Dados impulsionadas por IA. Nossa plataforma reduz ao mínimo o tempo gasto com gerenciamento em nuvem e simplifica todo o ciclo de vida dos dados — desde a coleta e exploração até o processamento e interação — permitindo que os clientes se concentrem em seus objetivos comerciais. Construída sobre um modelo SaaS de alto crescimento, a Dadosfera oferece soluções personalizadas que atendem às reais necessidades empresariais. O que diferencia a Dadosfera é seu foco inovador em velocidade, escalabilidade e flexibilidade, combinando armazenamento de big data com análises avançadas para impulsionar a tomada de decisões estratégicas. Aproveitando anos de experiência na implementação de plataformas de dados em nuvens públicas estrangeiras, agora entregamos uma solução economicamente eficiente e adaptada localmente, projetada tanto para o mercado brasileiro quanto para mercados globais. Ao unir expertise profunda com infraestrutura localizada, a Dadosfera fornece uma ferramenta poderosa e eficiente que otimiza a gestão corporativa de dados e impulsiona a transformação orientada a dados. **Sobre a Vaga** A Dadosfera, líder em Soluções de Plataforma de Dados e IA, está buscando talentos excepcionais em Engenharia de Dados. Procuramos alguém apaixonado por dados, que se destaque em um ambiente autônomo e altamente formativo, e que goste de trabalhar com tecnologias de ponta. Como Engenheiro de Dados, sua missão será gerenciar grandes volumes de dados, criando soluções e gerando insights para nossos clientes. **Responsabilidades** * Projetar, desenvolver e manter pipelines de dados escaláveis, eficientes e robustos. * Implementar processos de ingestão, transformação e qualidade de dados, garantindo confiabilidade e governança em todas as entregas. * Construir e otimizar arquiteturas de dados usando serviços em nuvem, Kubernetes e ferramentas de orquestração. * Desenvolver e manter APIs, scripts e integrações para ingestão de dados de múltiplas fontes (APIs, arquivos, crawlers, conectores). * Executar web scraping e desenvolvimento de crawlers, garantindo desempenho e integridade dos dados coletados. * Colaborar com equipes de produto, análise, ciência de dados e engenharia para viabilizar soluções de dados ponta a ponta. * Monitorar o desempenho dos pipelines e das soluções implementadas, identificando gargalos e propondo melhorias contínuas. * Apoiar iniciativas de arquitetura de dados, padronização técnica e boas práticas de engenharia. * Contribuir para o desenvolvimento de aplicações de dados (data apps), incluindo prototipagem e otimização com Streamlit. * Participar em projetos estratégicos envolvendo automações, integrações e — quando aplicável — recursos habilitados por IA. **Qualificações Mínimas** * Graduação em área STEM ou experiência equivalente no setor. * Proficiência em construir, manter e otimizar pipelines de dados. * Experiência com desenvolvimento em SQL e Python. * Experiência prática em ambientes Linux e serviços em nuvem. * Familiaridade com ferramentas de ingestão CDC (ex.: Debezium, DMS) e ferramentas de orquestração de dados (ex.: Airflow, NiFi). * Experiência prática com Kubernetes e Apache Spark. * Capacidade de construir, manter e consumir APIs, bem como desenvolver scripts e automações para manipulação e integração de dados provenientes de diversas fontes (APIs, arquivos, conectores personalizados). * Experiência com web scraping, crawlers e ferramentas de extração de dados da web (ex.: Scrapy, Beautiful Soup). * Fortes habilidades organizacionais e de priorização em ambientes com múltiplas demandas. * Experiência no desenvolvimento de aplicações de dados (data apps), especialmente com Streamlit. **Qualificações Desejáveis** * Experiência em projetos baseados em LLM, incluindo integração e consumo de modelos de IA dentro de soluções de dados. * Experiência em projetos de migração de plataformas ou ambientes de dados. * Conhecimento de práticas MLOps e DataOps para suportar aplicações impulsionadas por IA. * Experiência com ferramentas de infraestrutura como código, como Terraform ou CloudFormation. * Conhecimento de bancos de dados relacionais e não relacionais. * Experiência em startups de tecnologia ou com ferramentas de BI (Power BI, Tableau, Metabase). * Inglês intermediário ou avançado. Na Dadosfera, celebramos a diversidade em todas as suas formas e estamos comprometidos em fomentar um ambiente inclusivo todos os dias. Não toleramos qualquer forma de discriminação. Você compartilha nossos valores? Então não espere — candidate-se hoje!