Suponho que você esteja se referindo à RAM. Seu sistema não usa mais que 4GB porque você instalou um sistema de 32 bits, mas não se preocupe, faça isso:
sudo apt-get install linux-image-generic-pae, em seguida, reinicialize. Agora você pode verificar com
free
quanta RAM é usada pelo seu sistema.