A memória de 1,8 gb não é adequada para sistemas de 64 bits. Você deve considerar strongmente aumentar sua memória ou reverter para um sistema operacional de 32 bits.
Se nenhum deles não for possível, você pode tentar ativar Zswap no seu sistema. Meu palpite é que seu sistema fica sem memória e começa a escrever em swap, quando você enfrenta essas lentidões.