Engenheiro de Software Sênior – Aquisição de Dados

Descrição

Resumo: Procuramos um Engenheiro de Software Sênior para arquitetar e liderar a próxima evolução de uma plataforma de aquisição de dados, possibilitando ingestão segura, escalável e confiável de dados. Pontos principais: 1. Arquitetar e liderar a próxima evolução de uma plataforma de aquisição de dados 2. Impulsionar o projeto de um framework flexível e extensível de ingestão 3. Liderar o projeto de sistemas escaláveis de alta vazão para aquisição de dados **Sobre a equipe/papel** À medida que a WEX continua expandindo sua plataforma Data\-as\-a\-Service (DaaS), a Equipe de Aquisição de Dados desempenha um papel crítico ao viabilizar a ingestão segura, escalável e confiável de dados provenientes de centenas de sistemas internos e fontes externas. Procuramos um Engenheiro de Software Sênior para arquitetar e liderar a próxima evolução de nossa plataforma de aquisição de dados. Neste cargo, você impulsionará o projeto de um framework de ingestão flexível e extensível que suporte pipelines em lote, em fluxo contínuo e orientados a eventos, garantindo desde o início qualidade dos dados, observabilidade e governança. Este cargo é ideal para engenheiros que desejam trabalhar em problemas fundamentais de plataforma em larga escala — ajudando a ingerir bilhões de registros em diversos sistemas e impulsionando análises corporativas, IA e experiências de produto. **Como você gerará impacto** * Liderar o projeto e o desenvolvimento de sistemas escaláveis de alta vazão para aquisição de dados que integrem fontes de dados internas e externas em diversos domínios. * Arquitetar componentes centrais da plataforma — como roteamento de dados, orquestração de transformações, rastreamento de linhagem e evolução de esquemas — com base em sólidos princípios de engenharia de software. * Implementar um framework modular de ingestão capaz de suportar pipelines em fluxo contínuo e em lote com diferentes requisitos de latência e SLAs. * Oferecer liderança técnica, orientar engenheiros e estabelecer boas práticas em qualidade de código, otimização de desempenho, testes e observabilidade da plataforma. * Colaborar com equipes de domínio para compreender as necessidades de integração de dados e acelerar a incorporação por meio de padrões reutilizáveis e automação. * Trabalhar em estreita parceria com as equipes de Plano de Controle e DataOps para integrar orquestração, rastreamento de linhagem, controle de acesso e validação ao processo central de ingestão. * Construir e manter pipelines de alta performance para aquisição de dados que se integrem a diversos sistemas da WEX e fornecedores terceirizados. * Contribuir para o desenvolvimento de uma plataforma modular de ingestão que permita reutilização, confiabilidade e observabilidade em larga escala. * Implementar componentes centrais de pipelines, tais como validação de esquema, orquestração de transformações, tratamento de erros e registro de auditoria. * Suportar fluxos de ingestão em lote e em fluxo contínuo, garantindo que a plataforma atenda aos diversos requisitos de latência e volume entre unidades de negócio. * Garantir rastreabilidade, linhagem e segurança por meio da integração com sistemas de plano de controle e governança. * Participar de revisões de código, sessões de projeto e resolução de incidentes — promovendo altos padrões de qualidade de código e confiabilidade operacional. **Experiência que você trará** * Bacharelado em Ciência da Computação, Engenharia ou área técnica relacionada; mestrado é um diferencial, mas não obrigatório. * Experiência sólida como engenheiro de software ou de dados, preferencialmente em ambientes de alto volume ou sistemas distribuídos. * Excelentes habilidades de programação em Python, Java, Scala ou outra linguagem voltada a sistemas. * Experiência com pipelines de integração e ingestão de dados — você entende o que significa obter dados de sistemas-fonte, transformá-los e entregá-los de forma confiável para downstream. * Domínio sólido dos fundamentos de engenharia, incluindo controle de versão, projeto modular, testes e ajuste de desempenho. * Familiaridade com conceitos como evolução de esquema, arquiteturas orientadas a eventos, observabilidade e controle de acesso baseado em papéis. * Mentalidade colaborativa — confortável trabalhando entre domínios, produtos e camadas de infraestrutura. * Forte senso de propriedade e responsabilidade — você se importa profundamente com a construção de sistemas duradouros.