Eu preciso executar uma grande quantidade de cálculos em algo parecido com um cluster, o hardware e o sistema operacional são idênticos (o sistema operacional é o Ubuntu), mas nenhum software de gerenciamento central ou mecanismo de grade está instalado. A pesquisa na web resulta em software principalmente desatualizado ou proprietário.
Espero que minha pergunta não seja muito geral, mas quais são as opções de gerenciamento de cluster e de job scheduling para o Debian e seus derivados?
Para o gerenciamento geral do cluster, eu uso o cssh, mas essa abordagem não é muito eficiente quando se trata de agendamento e monitoramento de tarefas. Tenho experiência com o uso do venerável RIP do motor da grade Sun.
Obrigado por ler isto!
Se você está falando sobre coisas atualmente disponíveis dentro dos repositórios Debian / Ubuntu, eu sei de pelo menos duas opções de improviso.
Existe um fork grátis do SGE, Filho do Gridengine . Os pacotes atualmente no Debian / Ubuntu são baseados neste fork. Veja os pacotes gridengine-master e gridengine-exec .
SLURM . Veja o pacote slurm-wlm .
Tags debian cluster ubuntu gridengine