Primeiro de tudo, não configure nem se livre do seu swap estaticamente. Fazer isso é mais ou menos dizer que você sabe mais sobre o que está acontecendo nos internos do sistema operacional do que a Microsoft.
Uma coisa a ter em mente é que todas as suas placas gráficas, todos os dispositivos pci, etc, que possuem memória endereçável nelas estão tirando o máximo de memória do sistema. Depois de subtrair essa memória de sua memória fisicamente endereçável, você terá a parte que seu sistema operacional e aplicativos compartilham.
Se você precisar estender a quantidade de RAM a que seus aplicativos têm acesso, há um switch que pode ser definido no boot.ini, mas isso pode restringir a quantidade de memória com a qual o Windows precisa trabalhar.
Tim Slattery fez um bom artigo sobre o uso de RAM no Windows.
Há uma ótima explicação sobre a importância e o uso do arquivo de página em resposta a esta questão de falha de servidor .
Para ganhar mais memória utilizável, sua melhor aposta é atualizar para um sistema operacional de 64 bits que será capaz de fazer uso de um total de 3,5 GB de RAM.