Databricks Data Engineer
Descrição da Empresa
A Irium é uma empresa líder na implementação de Soluções e Sistemas de Tecnologia da Informação há mais de dezoito anos. Durante esse período, desenvolvemos e lançamos uma ampla gama de serviços de Suporte de TI flexíveis, de rápida implementação e totalmente adaptados às exigências e particularidades dos nossos clientes. O nosso objetivo é acompanhar as empresas no desenvolvimento de projetos, ajudando-as a otimizar seus recursos tecnológicos e de gestão. Para isso, os mais de setecentos de cinquenta profissionais que compõem hoje a IRIUM, assumem o compromisso e o desafio de superar cada projeto que empreendemos e com o qual construímos uma experiência que nos tornou líderes de um mercado complexo e em constante evolução.
Descrição da Função
Na IRIUM, queremos que persigas sempre os teus sonhos! Aqui, prepara-te para conquistares as tuas metas, enquanto desfrutas do caminho. Atualmente, encontramo-nos à procura de um Databricks Data Engineer. Requisitos: Procuramos um/a Databricks Data Engineer para integrar a equipa de dados, desenvolvendo pipelines em Databricks/Spark e arquiteturas Lakehouse. O candidato ideal tem cerca de 4 anos de experiência, é autónomo, orientado à qualidade e consegue comunicar fluentemente em inglês. Requisitos: • Databricks / Apache Spark (PySpark) • SQL avançado e Delta Lake • ETL/ELT e Cloud (preferencialmente Azure) • Inglês fluente • Experiência em ambiente regulado / segurador (preferencial) Valorizado: • Azure Data Factory, Synapse, Kafka/Streaming, Unity Catalog • Certificações Databricks/Azure O que oferecemos: • Projetos estratégicos no setor segurador • Stack tecnológica moderna e desafios de grande escala • Trabalho híbrido e equipa internacional Responsabilidades: • Desenvolver, manter e otimizar pipelines de dados em Databricks (Apache Spark) • Implementar arquiteturas Lakehouse com Delta Lake (Bronze / Silver / Gold) • Criar processos de ingestão e transformação de dados (batch e streaming) • Garantir performance, fiabilidade e escalabilidade dos jobs Spark • Trabalhar com dados provenientes de múltiplas fontes e sistemas • Colaborar com equipas internacionais, técnicas e de negócio • Assegurar boas práticas de data quality, segurança e governance • Produzir e manter documentação técnica em Inglês Requisitos: • Cerca de 4 anos de experiência em Data Engineering • Experiência sólida com Databricks • Bons conhecimentos de Apache Spark (PySpark) • Forte domínio de SQL • Experiência com Delta Lake • Experiência em Cloud (preferencialmente Azure Databricks) • Experiência com pipelines ETL/ELT • Inglês fluente (obrigatório) – comunicação escrita e oral • Experiência com Git e boas práticas de desenvolvimento Valorizado: • Experiência no setor segurador ou financeiro • Experiência com Azure Data Factory, Synapse ou ferramentas equivalentes • Streaming (Kafka / Event Hubs / Spark Structured Streaming) • Unity Catalog e governação de dados • Experiência em ambientes regulados • Certificações Databricks ou Azure Perfil: • Capacidade de trabalhar em ambientes internacionais • Boa comunicação em Português e Inglês • Autonomia, sentido crítico e atenção ao detalhe • Orientação à qualidade e fiabilidade dos dados Localização: Lisboa Regime: Híbrido O que oferecemos? Uma empresa inovadora e em crescimento, com muitas oportunidades de desenvolvimento profissional. Retribuição de acordo com a tua experiência e performance. Acesso a retribuição flexível e seguro médico como benefício social. Acesso ilimitado a formação tecnológica em modalidade livre. A IRIUM é uma empresa formada por profissionais dinâmicos e proativos. Os nossos valores são a responsabilidade e o compromisso com a qualidade do trabalho. Este é o espírito que procuramos na IRIUM, seja qual for a tua idade. Se te reconheces nestes valores, esta é a tua empresa! Podemos construir juntos o futuro. Falamos? Na IRIUM, defendemos um mundo sem estereótipos nem limitações e acreditamos na igualdade para todos, princípios que subscrevemos no nosso Plano de Igualdade e Código de Ética, garantindo a igualdade de tratamento e de oportunidades à margem de qualquer condição pessoal, física ou social.
Localização
- Lisboa, Portugal