OK, basicamente você precisa instalar o pacote php5 através do apt-get. Quando você faz isso, você precisa ativar o módulo php5 executando o seguinte como root:
a2enmod php5
Em seguida, abra sua configuração do Apache ou configuração do host virtual e adicione a linha:
AddType application/x-httpd-php .php
Em seguida, reinicie o apache executando o seguinte como root:
service apache2 restart
Se isso não funcionar, verifique os logs em / var / log / apache2. Cole as últimas 100 linhas de error.log aqui.