Big Data Administrator

Procuramos um/a Administrador/a de Big Data para operar e dar suporte a uma plataforma Hadoop baseada em Cloudera em ambiente de produção local. Esta função foca-se na administração da plataforma, infraestrutura e operações ao nível do sistema, não em engenharia de dados ou análise.

Responsabilidades

• Administrar e dar suporte a clusters Cloudera/Hadoop em produção
• Realizar aplicação de patches, atualizações e gestão do ciclo de vida da plataforma
• Fornecer suporte de 3ª linha, resolução avançada de problemas e otimização de desempenho
• Monitorizar e gerir os serviços HDFS, YARN e Kafka
• Garantir a integridade dos dados, replicação e gestão de capacidade
• Gerir a segurança e os controlos de acesso (Kerberos, Ranger/Sentry, TLS)
• Automatizar tarefas operacionais utilizando Ansible e Python/Java
• Colaborar com as equipas de infraestrutura (rede, armazenamento, segurança)
• Manter a documentação atualizad...