Infiniband no Linux?

Question

Eu vou construir um cluster de computação (cerca de 64 nós) e estou procurando por algumas informações. Eu quero conectá-los com o Infiniband e instalar o Linux. Eu tentei google um pouco, mas não consegui encontrar nenhuma informação sobre como configurar uma configuração simples de trabalho.

Eu quero usá-lo para acessar NAS e para comunicação entre processos (MPI, etc.)

É fácil configurar o Infiniband no Linux? Como fazer isso? Ou talvez haja melhor solução?

    

Answer 1

O Infiniband em si não é um grande negócio para configurar. Você tem que carregar o driver para o seu dispositivo e se você não quiser usar mais nada, então IP o módulo do kernel ipoib.

1 IP OVER INFINIBAND 2
3 O driver ib_ipoib é uma implementação do IP sobre InfiniBand 4 protocolo como especificado pela RFC 4391 e 4392, emitido pelo IETF ipoib 5 grupo de trabalho. É uma implementação "nativa" no sentido de 6 definindo o tipo de interface para ARPHRD_INFINIBAND e o hardware 7 de endereço para 20 (implementações proprietárias anteriores 8 mascarados para o kernel como interfaces ethernet).

Depois disso, você poderá usar seu dispositivo como um dispositivo Ethernet normal.

    

Answer 2

Você precisa absolutamente do Inifiband? Ou você só precisa de links de alta largura de banda entre as coisas? Talvez seja melhor ligar vários links de 1GigE ou usar 10GigE.

    

Answer 3

Fácil? barato? não realmente, mas definitivamente possível . Como você não está indo para a solução de orçamento (são apenas seis números para o metal), você provavelmente desejaria usar o suporte de um SO corporativo e pago.

    

Answer 4

Em nossa universidade Scientific Linux , que é preparado por laboratórios de pesquisa conhecidos mundialmente, é usado no cluster. Com pacotes extras, Infiniband e IP over Infiniband são possíveis.

    

Answer 5

O Sun HPC Linux Edition é um servidor HPC em cluster do Linux com o Infiniband. Eu não sei os detalhes da configuração, mas alguns bons números de desempenho estão chegando.