Senior Spark/Pyspark (databricks) Lisboa

Senior Spark/Pyspark (databricks)
Lisboa
Lisboa, Lisboa, Portugal

Descrição da Empresa

A Irium é uma empresa líder na implementação de Soluções e Sistemas de Tecnologia da Informação há mais de dezoito anos. Durante esse período, desenvolvemos e lançamos uma ampla gama de serviços de Suporte de TI flexíveis, de rápida implementação e totalmente adaptados às exigências e particularidades dos nossos clientes. Nosso objetivo é acompanhar as empresas no desenvolvimento de projetos,
- as a otimizar seus recursos tecnológicos e de gestão. Para isso, os mais de setecentos e cinquenta profissionais que compõem hoje a Irium assumem o compromisso e o desafio de superar cada projeto, construindo uma experiência que nos tornou líderes em um mercado complexo e em constante evolução.

Descrição da Função

Na Irium, queremos que você sempre persiga seus sonhos. Aqui,
- se para conquistar seus objetivos, aproveitando a jornada. Atualmente, buscamos um(a) Engenheiro(a) de Dados Sênior com experiência em Spark/Py
Spark (Databricks) para uma empresa do setor de petróleo.

Requisitos:

1. Focar na reformulação e modernização de nossa biblioteca ETL em Python e Py
   Spark, bem como tabelas Delta, com uma abordagem mais voltada para engenharia de software do que apenas engenharia de dados. Experiência com Databricks será um diferencial.
2. Focar em engenharia de dados para integrar novas tabelas e prepará-las para os usuários finais. É necessário forte conhecimento em Python, Py
   Spark e SQL.
3. Contribuir para o desenvolvimento de nossa estrutura de Qualidade de Dados utilizando a biblioteca Great Expectations para Spark.

Localização: Lisboa, Braga ou Coimbra, Portugal. O modelo de trabalho será híbrido.

O que oferecemos?

Uma empresa inovadora e em crescimento, com muitas oportunidades de desenvolvimento profissional. Remuneração compatível com sua experiência e desempenho. Acesso a benefícios flexíveis, incluindo plano de saúde. Acesso ilimitado a treinamentos tecnológicos de forma gratuita. A Irium valoriza profissionais dinâmicos e proativos, com responsabilidade e compromisso com a qualidade do trabalho. Nosso espírito é de inclusão e igualdade, conforme nosso Plano de Igualdade e Código de Ética, garantindo tratamento e oportunidades iguais para todos, independentemente de condição pessoal, física ou social. Se você se identifica com esses valores, venha construir o futuro conosco. Vamos conversar!