Lead Data Engineer
Job Summary
Procuramos um(a) Lead Data Engineer experiente para desenvolver pipelines de dados cloud-native em ambientes Microsoft. O profissional será responsável pela arquitetura e modelação de dados, garantindo soluções de alto desempenho e escaláveis. Terá um papel fundamental na liderança técnica, promovendo decisões orientadas por dados e orientando equipas para o sucesso dos objetivos de negócio.
Responsibilities
- Desenvolvimento de pipelines de dados cloud-native
- Arquitetura e modelação de dados end-to-end
- Liderança técnica e mentoria de equipas
- Otimização de performance, custo e fiabilidade de dados
- Implementação de práticas CI/CD e DataOps
Required Skills
- Python, SQL e Spark
- Microsoft Azure (Fabric, ADF, Synapse)
- Cloud Data Warehousing (BigQuery, Redshift)
- Arquitetura Medallion
- Experiência mínima de 8 anos
Job Details
Responsabilidades e Perfil:
Procuramos um(a) Lead Data Engineer experiente, com forte conhecimento no desenvolvimento de pipelines de dados cloud-native em ambientes Microsoft. O perfil ideal deverá possuir experiência sólida em arquitetura e modelação de dados, bem como capacidade para implementar soluções de alto desempenho que suportem os objetivos de negócio da organização. Terá um papel fundamental na promoção de decisões orientadas por dados e na criação de soluções analíticas escaláveis em toda a empresa.
Competências Técnicas:
- Experiência sólida em arquitetura e desenho end-to-end de soluções de dados, incluindo ingestão, modelação, armazenamento e orquestração (ex.: arquitetura Medallion).
- Conhecimento avançado em engenharia cloud-native, com foco em tecnologias Microsoft (Fabric, Azure Data Factory, Synapse), sendo valorizada experiência noutras cloud platforms como AWS ou Google Cloud.
- Experiência prática com soluções de data warehouse e data lake (ex.: BigQuery, Azure Data Lake, Delta Lake, Amazon Redshift).
- Domínio de linguagens de programação como Python (incluindo bibliotecas orientadas a dados, como Pandas e Boto3), SQL e Spark.
- Bons conhecimentos de bases de dados relacionais (Oracle, MS SQL Server) e/ou NoSQL (MongoDB, ElasticSearch, GBQ).
- Experiência com práticas DevOps/DataOps, incluindo pipelines CI/CD.
- Capacidade para implementar mecanismos de validação de dados, data lineage, documentação e monitorização em larga escala.
- Experiência comprovada na otimização de pipelines e soluções de armazenamento ao nível de performance, custo e fiabilidade.
- Forte experiência em liderança técnica, com capacidade demonstrada para orientar equipas e comunicar de forma eficaz.
Competências Comportamentais:
- Capacidade de avaliar trade-offs e tomar decisões técnicas claras e sustentadas.
- Aptidão para traduzir decisões técnicas complexas em explicações simples e compreensíveis para stakeholders não técnicos.
- Capacidade de mentoria e desenvolvimento de perfis mid/junior, promovendo boas práticas e uma cultura colaborativa.
- Facilidade em decompor problemas complexos e ambíguos em ações objetivas e executáveis.
- Sentido de responsabilidade, visão estratégica e capacidade de antecipar problemas e impulsionar a evolução contínua da plataforma.
Experiência:
- Mínimo de 8 anos de experiência em Data Engineering, com foco em soluções cloud-native e arquitetura de dados.
- Nível de inglês mínimo B2.
Benefícios:
- Um projeto dinâmico num cliente bem-conceituado a nível Internacional;
- Enquadramento salarial de acordo com a experiência demonstrada;
- Evolução de carreira com intervenção em projetos tecnológicos ambiciosos e inovadores;
- Integração em equipa dinâmica e heterogénea;
- Acompanhamento personalizado a cada consultor;
- Integração nos quadros Sysmatch com acesso a todas as atividades da empresa;
- Acesso a formações e eventos Team Building;
- Rede de parcerias com descontos exclusivos em diversos setores.