Junior Data Engineer (Microsoft Azure – Databricks)

Company Introduction

Expleo is a trusted partner for your innovation journey. As a global engineering, technology and consulting service provider, we are ideally positioned to help you achieve your ambitions and future-proof your business. With a smart blend of bold thinking and reliable execution, we’re able to fast-track innovation through each step of your value chain. We are strategically positioned to build value, with global footprint across 30 countries. We are as global and local as you need us to be, with strong best-in-class pan-European technological centres and unique best-shoring capabilities. We leverage a network of high value-adding affiliates in consulting and industrial excellence, and leading partners across multiple sectors to provide you with the most comprehensive services and solutions in an ever-changing environment.

Job Responsibilities

• Implementar soluções de dados em ambiente Microsoft Azure, seguindo boas práticas de Engenharia de Dados;
• Desenvolver e manter pipelines ETL/ELT utilizando Azure Data Factory e Azure Databricks, incluindo desenvolvimento de notebooks em PySpark;
• Participar no processo completo de desenvolvimento de soluções de dados, desde a ingestão e transformação até à modelação e disponibilização dos dados;
• Contribuir para a implementação de modelos de dados orientados a arquiteturas Data Lakehouse, nomeadamente através da abordagem Medallion Architecture;
• Colaborar com a equipa técnica na análise, desenvolvimento, testes e entrega de soluções de Engenharia de Dados;
• Apoiar a monitorização, manutenção e otimização dos pipelines e processos de dados.

Required Experience

• 6 meses a 1 ano de experiência em Engenharia de Dados;
• Experiência com o ecossistema Microsoft Azure;
• Experiência prática com Azure Databricks;
• Conhecimentos de PySpark e desenvolvimento de notebooks em Databricks;
• Experiência no desenvolvimento de pipelines ETL/ELT;
• Conhecimento do ciclo completo de desenvolvimento de soluções de dados, incluindo transformação, modelação e disponibilização;
• Conhecimentos de arquiteturas Data Lakehouse e Medallion Architecture.

Additional Skills

• Experiência com Azure Data Factory;
• Experiência em metodologias Agile/Scrum;
• Conhecimentos de Jira e Confluence;
• Conhecimentos de modelação de dados;
• Conhecimentos de boas práticas de qualidade, organização e documentação de pipelines de dados.

Work Arrangement

A oportunidade é remota, mas o candidato deve residir atualmente em Portugal.