Estamos a contratar | Data Engineer – Databricks (Performance & Security)
Na Mootiva, estamos a recrutar um Data Engineer para integrar um projeto desafiante, com forte foco em excelência da plataforma Databricks, performance, segurança e boas práticas operacionais.
Esta função é ideal para profissionais com uma abordagem sólida à engenharia de dados, governação e otimização de performance, que queiram aprofundar conhecimento técnico e evoluir para cenários de streaming e data platforms de grande escala.
Responsabilidades:
- Otimizar performance de workloads, jobs e clusters em Databricks
- Implementar e manter governação, segurança e permissões com Unity Catalog e Terraform
- Ativar e evoluir funcionalidades como Delta Live Tables e Databricks Asset Bundles (DABs)
- Monitorizar clusters e jobs com Grafana e ferramentas de observabilidade
- Apoiar equipas de Data Engineering na afinação de jobs e queries SQL
- Explorar e implementar soluções de streaming (Structured Streaming, Autoloader, Kafka)
Plataforma & Stack
Azure Databricks · Azure ADLS Gen2 · Airflow (AKS) · Terraform · Python · PySpark · SQL · Grafana · Kafka (Aiven) · GitLab · Talend · DABs · DQX (Data Quality Framework)
O que procuramos
- Experiência sólida em configuração, administração e otimização de Databricks
- Bons conhecimentos de PySpark, SQL e tuning de performance
- Experiência com Unity Catalog e infra como código (Terraform)
- Forte noção de segurança, governação e controlo de custos
- Experiência ou interesse em streaming de dados
Na Mootiva, ligamos talento à inovação.