Verifique no BIOS se ele reconhece esses 4GB, se não, então você tem que verificar se eles estão no slot de memória, e verifique se essas memórias são de fato 4GB no total (pode ser apenas um ou dois cartões de memória) .
Se o BIOS reconhecer 4 GB, então ... você está usando uma versão de 32 ou 64 bits do Ubuntu, se você quiser usar uma grande quantidade de memória em seu computador, use um sistema operacional de 64 bits.