Se você precisa de espaço de troca ou não, depende do número e do tipo de aplicativos que você executa. Eu tenho um sistema desktop com 6 GB de RAM e sem swap configurado. 99,9% do tempo que funciona bem para mim. O desempenho é bom e posso executar muitos aplicativos simultâneos. No entanto, lembro-me pelo menos duas vezes quando o meu sistema abrandou ao ponto em que ficou totalmente indiferente devido ao uso excessivo de memória. Em um desses casos, consegui abrir uma janela do console e matar uma das grandes memórias usando tarefas. Em outro caso, eu não poderia nem fazer isso e minha única opção era desligar o sistema, perdendo tudo que estava em andamento.
Não sabemos se os seus padrões de uso são como o meu, no entanto, se eu estivesse fazendo isso novamente, teria configurado algum espaço de troca.
No meu caso, o total de 8 GB teria sido adequado. A menos que você esteja muito precisando de espaço em disco, eu recomendo que você dedique 4 GB para swap. 8 GB não vão te machucar, mas é menos importante se você puder usar o espaço em disco para coisas mais importantes.