Job Description

Vaga: Senior Databricks Specialist + Python

Procuramos um Senior Databricks Specialist + Python para desenhar, evoluir e governar uma biblioteca Python comum e reutilizável, que servirá de base a pipelines batch e streaming numa Arquitetura Medallion (Bronze, Silver e Gold).

️ Principais Responsabilidades

  • Desenvolvimento e manutenção de uma biblioteca Python partilhada em Databricks
  • Criação de módulos reutilizáveis em PySpark para pipelines batch e streaming
  • Definição e aplicação de boas práticas de código, testes, documentação e versionamento
  • Participação ativa em equipas Scrum (cerimónias Agile)
  • Implementação e melhoria de pipelines CI/CD (GitLab e Databricks Asset Bundles)
  • Integração de logging, monitorização e qualidade de dados (Grafana, DQX)
  • Colaboração próxima com engenheiros, Product Owners e DataOps

Requisitos

  • +10 anos de experiência profissional em Python ...

Apply for this Position

Ready to join IT People Innovation? Click the button below to submit your application.

Submit Application