Debian é debian - não há servidor separado e variante de desktop, e a diferença é inteiramente na seleção de pacotes. Se você tem uma conexão estável, o debian minimal é um bom ponto de partida, senão baixe o primeiro cd do conjunto de instalação. Você pode optar por instalar o que quiser ao longo do caminho.
O Turion II Neo nesses sistemas é certamente capaz de 64 bits, e assim você pode executar qualquer um. Não há muita razão não para executar 64 bits, especialmente se você exceder o número de RAM no sistema.