Data Engineer - ARPA
Job Summary
Como Data Engineer de nível intermédio, irá conceber e construir as bases modernas de dados que suportam análises à escala empresarial. Será responsável por arquitetar e implementar ambientes de lakehouse e data warehouse escaláveis, permitindo o processamento de dados em tempo real e em batch. Terá também um papel fundamental na definição de práticas robustas de gestão, governação e qualidade de dados.
Responsibilities
- Desenho e implementação de arquiteturas de dados em Microsoft Fabric
- Gestão de dados e otimização em OneLake
- Desenvolvimento de pipelines de ingestão e orquestração
- Transformação de dados e garantia de qualidade
- Implementação de práticas de DevOps e CI/CD
Required Skills
- Python, PySpark e Spark
- Microsoft Fabric e Azure Data Lake
- T-SQL e KQL
- ETL/ELT e Data Modeling
- Experiência mínima de 3 anos
Job Details
Responsabilidades:
• Desenho e implementação de arquiteturas de dados em Microsoft Fabric, com foco em lakehouse e organização em camadas.
• Gestão de dados em OneLake com otimização de performance, custo e governação.
• Desenvolvimento de pipelines de ingestão e orquestração para integrar dados de múltiplas fontes (batch e streaming).
• Tratamento e transformação de dados em scale, garantindo qualidade, consistência e preparação para consumo analítico.
• Suporte a analytics em tempo real e integração de dados operacionais.
• Preparação de dados para soluções de inteligência artificial e machine learning.
• Implementação de práticas de DevOps, CI/CD e gestão de ambientes.
• Monitorização contínua, resolução de problemas e otimização de performance em toda a plataforma de dados.
Perfil:
• Habilitações ao nível Mestrado/Licenciatura em Engenharia Informática, Ciências de Informação ou similares;
• +3 anos de experiência em data engineering, ETL e plataformas de dados;
• Forte domínio de Python (valorizado PySpark) e conhecimentos sólidos de Spark e computação distribuída;
• Experiência com plataformas cloud: Microsoft Fabric, Azure Data Lake Gen2, Databricks, Synapse, ecossistema Microsoft Fabric e serviços Azure (ADLS, Event Hubs, Key Vault);
• Elevada proficiência em T-SQL e KQL, incluindo otimização de queries;
• Conhecimento nos serviços do Microsoft Fabric: Data Lakehouse, Data Warehouse e Real-Time Intelligence;
• Conhecimento de ETL/ELT, modelação de dados e arquiteturas lakehouse (Medallion);
• Valorizamos a certificação DP-700.
Benefícios:
• Integração num Grupo sólido e credível, tendo em curso a implementação de vários projetos de crescimento;
• Formação e possibilidade de desenvolvimento profissional e pessoal;
• Oportunidade real de progressão de carreira, de acordo com o desempenho e as competências demonstradas;
• Boas condições de trabalho e regalias sociais em vigor na empresa (Seguro de Saúde e Seguro de Vida).