O maior problema com o uso de placas de desktop em um servidor não é sobre memória (o que não importa), seu espaço e poder.
As placas do servidor são geralmente menores, sem os enormes dissipadores de 2 a 3 slots e as placas de desktop dos ventiladores podem ter.
Eles também não precisam de um cabo de energia extra. A maioria dos servidores não tem um conector de alimentação de placa de vídeo de 6 ou 8 pinos (alguns podem, ou você pode ser capaz de hackear um).
O calor também é um problema - em pequenos sistemas de montagem em rack, há apenas muito calor que pode ser removido com ventiladores de 1 polegada.
E, finalmente, drivers - algumas placas de desktop não terão drivers adequados para sistemas operacionais de servidor. Às vezes, você pode usar os drivers do sistema operacional do cliente equivel, às vezes não.
A outra diferença é como as cartas se desempenham em várias tarefas. As placas de desktop são projetadas para jogos. As placas de servidor e de estação de trabalho normalmente se destacam no desempenho de 2d para coisas como aceleração de gpu em servidores de terminal e coisas como renderização de autocad. Eles também tendem a ser mais estáveis e custam muito mais.
Se uma placa de desktop se adaptar ao seu servidor, tiver as conexões de energia apropriadas, não superaquecer e oferecer o tipo de desempenho que você precisa, vá em frente.