Nome da função: Data Engineer (Apache, Python)
Localização: Porto, Portugal
Regime de trabalho: Full-time & Híbrido (2x office)
Resumo / Visão geral:
Procuramos um/uma Data Engineer para se juntar à nossa equipa!
Responsabilidades e Tarefas da Função
Arquitetar e implementar pipelines de dados em tempo real para processar documentos comerciais, transações financeiras e eventos de expedição;
Desenvolver modelos de dados escaláveis para apoiar a análise das finanças comerciais, o controlo da exposição ao crédito, os fluxos de trabalho de pagamento e o desempenho logístico;
Integrar dados de diversos sistemas, incluindo ERPs, plataformas bancárias, redes de remessa e fontes de dados alfandegários usando Kafka e APIs;
Otimizar o processamento de dados distribuído com o Apache Spark e o Flink para permitir informações precisas e atempadas sobre dados comerciais;
Criar dashboards interativos e análises operacionais utilizando o Apache Superset para as partes interessadas em finanças, conformidade e logística;
Implementar a governação de dados, verificações de qualidade e rastreio de linhagem em toda a arquitetura de dados;
Colaborar com as equipas de finanças, risco, operações e IT para compreender as necessidades de dados e fornecer soluções escaláveis.
Requirements
Requisitos Obrigatórios
Mais de 4 anos de experiência enquanto Data Engineer, idealmente em finanças, comércio ou logística;
Experiência sólida e prática com Apache Spark (batch processing), Apache Flink (streaming), Apache Kafka (streaming de eventos e integração de dados), Python (scripts ETL, processamento de dados), SQL (para modelação e consulta de dados estruturados);
Experiência na criação de visualizações de dados e dashboards utilizando o Apache Superset ou ferramentas de BI semelhantes;
Proficiência na conceção de modelos de dados relacionais e analíticos para relatórios financeiros e operacionais;
Familiaridade com plataformas de financiamento do comércio, ERPs ou sistemas de controlo logístico;
Experiência com infraestruturas de dados baseadas na cloud (AWS, GCP ou Azure);
Idiomas: Português e inglês fluentes.
#VisionaryFuture - Build the future, join our living ecosystem!