A Spark está em busca de um(a) Staff Data Engineer para desenhar, construir e evoluir a plataforma de dados da empresa do zero, com autonomia para definir arquitetura, padrões técnicos e a fundação que sustentará o programa corporativo AI First. O profissional terá papel essencial na transformação de dados dispersos entre sistemas legados e fontes operacionais em uma plataforma unificada, governada e escalável, capaz de embasar decisões de negócio, produtos digitais e iniciativas de Inteligência Artificial.
Responsabilidades
- Definir e implementar a arquitetura da plataforma de dados, considerando um modelo lakehouse em camadas (bronze, silver e gold);
- Projetar pipelines de ingestão, transformação e processamento de dados provenientes de sistemas internos, aplicações e APIs externas;
- Estabelecer padrões de governança, catálogo, linhagem, qualidade e observabilidade de dados;
- Implementar mecanismos de segurança, controle de acesso e isolamento de dados sensíveis, em conformidade com a LGPD;
- Estruturar datasets confiáveis para analytics, indicadores corporativos e aplicações de IA/ML;
- Definir estratégias de infraestrutura, escalabilidade, performance e otimização de custos na AWS;
- Influenciar decisões de arquitetura de dados e disseminar boas práticas de engenharia de dados em parceria com os times de Produto, Engenharia e Negócio;
- Apresentar roadmap de evolução da plataforma, indicadores de custo e próximos domínios de dados a serem endereçados.