Bem, eu acho que você deve desinstalá-lo. Digite o seguinte comando no seu terminal para remover todos os pacotes associados a ele e depois de reinstalá-lo "leva menos de 5 minutos".
sudo apt-get purge apache2
sudo apt-get autoremove
sudo apt-get install apache2
Caso você queira seguir em frente, confira este link: install-apache-mysql-php-on Ubuntu . Atualmente estou contando com isso um pouco como esses caras são configurados e depurados. Vai te fazer bem, eu acredito.