Senior Data Engineer

Senior Data Engineer

Descrição da Empresa

A Olisipo é uma das principais e mais sólidas referências nacionais como talent recruiter, talent builder e talent care na área das tecnologias de informação. A nossa missão é encontrar o melhor projeto para cada pessoa e, para cada empresa, o melhor talento na área das tecnologias de informação.   #ConnectingITPeople

Descrição da Função

Perfil: - Experiência superior a 7 anos como Data Engineer, Data Developer ou funções similares; - Experiência sólida no desenvolvimento e operação de plataformas de dados em Microsoft Fabric e Microsoft Azure; - Conhecimentos de arquiteturas Data Lakehouse e Medallion (Bronze, Silver e Gold); - Experiência no desenvolvimento de processos ETL/ELT e integração de dados; - Domínio de PySpark, Spark SQL, Python, T-SQL e PL/SQL; - Experiência na implementação e otimização de notebooks, pipelines e processos de integração de dados; - Conhecimentos de Microsoft Fabric Lakehouse, Fabric Warehouse e Delta Lake; - Experiência na utilização de Microsoft Purview para gestão de metadados e governação de dados; - Conhecimentos de Data Lineage, Metadata Management, Data Quality e Master Data Management; - Experiência em testes de dados, Data Acceptance Testing e validação funcional; - Experiência em modelação de dados conceptual, lógica e física; - Conhecimentos de Git e processos CI/CD aplicados a plataformas de dados; - Experiência em metodologias Agile (Scrum, Kanban ou Waterfall); - Forte capacidade analítica, orientação para resultados e trabalho em equipa; - Certificações Microsoft DP-203, DP-600, DP-700, AZ-900 ou equivalentes serão valorizadas; - Experiência no setor das Telecomunicações e em projetos de modernização de plataformas de dados será valorizada. Responsabilidades: - Desenvolver e operar soluções de dados em Microsoft Fabric e Azure, assegurando a ingestão, transformação e disponibilização de dados; - Implementar pipelines de dados e processos ETL/ELT em arquiteturas Bronze, Silver e Gold; - Desenvolver notebooks e processos de integração utilizando PySpark, Spark SQL e SQL; - Participar na integração de novos sistemas na plataforma de dados, definindo modelos de dados e requisitos técnicos; - Garantir a disponibilização de datasets fiáveis, governados e otimizados para reporting, analytics e iniciativas de Inteligência Artificial; - Implementar e manter processos de CI/CD para notebooks, pipelines, Lakehouses, Semantic Models e restantes componentes da plataforma Microsoft Fabric; - Assegurar a gestão de metadados, Data Lineage, Data Quality e Master Data Management; - Realizar testes de dados, Data Acceptance Testing e validação funcional das soluções implementadas; - Colaborar com as equipas de IT, Data Governance, - Arquitetura, Inteligência Artificial e áreas de negócio na evolução da plataforma de dados. Oferecemos: - Seguro de Saúde; - Formação online gratuita, através da plataforma Udemy; - Formação Presencial e Remota no Learning Center da Olisipo; - Certificações Gratuitas (mediante aprovação em exame); - Descontos em Parceiros Olisipo (áreas de saúde e bem-estar, fitness, viagens, entre outros); - Consultas psicológicas gratuitas; - Possibilidade de adiantamento de salário, sem comissões.

Localização

  • Lisboa, Portugal
Contactar empresa