Depende do seu uso.
Se você tem vários programas abertos simultaneamente e descobre que o computador está ficando lento a esse respeito, atualize sua memória RAM. 1GB de memória pode ser preenchido muito rapidamente, e usar muito swap vai realmente te atrapalhar.
Se você estiver usando programas de alta CPU, como edição de filmes / músicas / fotos, verá um desempenho de processamento mais rápido atualizando sua CPU.
Basicamente, se você executar muitos programas ao mesmo tempo, atualize sua memória RAM. Se você executar um ou apenas alguns, atualize a CPU.