Data Engineer (Apache, Python) Porto

Data Engineer (Apache, Python)
Porto
Porto, Porto, Portugal

Nome da função: Data Engineer (Apache, Python) Localização: Porto, Portugal Regime de trabalho: Full-time & Híbrido (2x office) Resumo / Visão geral:

Procuramos um/uma Data Engineer para se juntar à nossa equipa!



Responsabilidades e Tarefas da Função Arquitetar e implementar pipelines de dados em tempo real para processar documentos comerciais, transações financeiras e eventos de expedição;

Desenvolver modelos de dados escaláveis para apoiar a análise das finanças comerciais, o controlo da exposição ao crédito, os fluxos de trabalho de pagamento e o desempenho logístico;

Integrar dados de diversos sistemas, incluindo ERPs, plataformas bancárias, redes de remessa e fontes de dados alfandegários usando Kafka e APIs;

Otimizar o processamento de dados distribuído com o Apache Spark e o Flink para permitir informações precisas e atempadas sobre dados comerciais;

Criar dashboards interativos e análises operacionais utilizando o Apache Superset para as partes interessadas em finanças, conformidade e logística;

Implementar a governação de dados, verificações de qualidade e rastreio de linhagem em toda a arquitetura de dados;

Colaborar com as equipas de finanças, risco, operações e IT para compreender as necessidades de dados e fornecer soluções escaláveis.

Requirements Requisitos Obrigatórios Mais de 4 anos de experiência enquanto Data Engineer, idealmente em finanças, comércio ou logística;

Experiência sólida e prática com Apache Spark (batch processing), Apache Flink (streaming), Apache Kafka (streaming de eventos e integração de dados), Python (scripts ETL, processamento de dados), SQL (para modelação e consulta de dados estruturados);

Experiência na criação de visualizações de dados e dashboards utilizando o Apache Superset ou ferramentas de BI semelhantes;

Proficiência na conceção de modelos de dados relacionais e analíticos para relatórios financeiros e operacionais;

Familiaridade com plataformas de financiamento do comércio, ERPs ou sistemas de controlo logístico;

Experiência com infraestruturas de dados baseadas na cloud (AWS, GCP ou Azure);

Idiomas: Português e inglês fluentes. #Visionary
Future - Build the future, join our living ecosystem!