??
Vaga: Senior Databricks Specialist + Python
Procuramos um
Senior Databricks Specialist + Python
para desenhar, evoluir e governar uma
biblioteca Python comum e reutilizável
, que servirá de base a pipelines batch e streaming numa
Arquitetura Medallion (Bronze, Silver e Gold)
.
???
Principais Responsabilidades
Desenvolvimento e manutenção de uma biblioteca Python partilhada em Databricks
Criação de módulos reutilizáveis em PySpark para pipelines batch e streaming
Definição e aplicação de boas práticas de código, testes, documentação e versionamento
Participação ativa em equipas Scrum (cerimónias Agile)
Implementação e melhoria de pipelines CI/CD (GitLab e Databricks Asset Bundles)
Integração de logging, monitorização e qualidade de dados (Grafana, DQX)
Colaboração próxima com engenheiros, Product Owners e DataOps
?
Requisitos
+10 anos de experiência profissional em Python
+5 anos de experiência prática com Databricks e PySpark em produção
Experiência sólida em desenho de bibliotecas ou frameworks partilhados
Forte conhecimento de engenharia de software (OOP, design patterns, testes, CI/CD)
Experiência com processamento de dados batch e streaming
Conhecimento de Arquitetura Medallion
Experiência em ambientes Agile/Scrum
Bons conhecimentos de inglês (oral e escrito)
?
Valorizamos
Certificações Databricks e/ou Azure
Experiência em plataformas partilhadas usadas por múltiplas equipas
Trabalho em contextos internacionais ou distribuídos
??
Perfil
Forte capacidade de comunicação e colaboração
Sentido de responsabilidade e melhoria contínua
Confortável com ambiguidade e requisitos em evolução
Espírito de equipa e foco na qualidade técnica
??
Modelo de Trabalho
Regime maioritariamente remoto
?? Interessado/a em construir soluções de dados robustas e escaláveis num ambiente tecnológico avançado?
Candidata-te!