LAMP significa L inux Um pache M ySql (MariaDB) P HP (Perl, Python) enquanto o XAMPP significa Cross-Platform ( X ) A pache M ariaDB P hp P erl. Se você estiver usando o Ubuntu, você pode facilmente desinstalar o MySQL, PHP e Apache usando o apt.
sudo apt-get remove php5 mysql-client mysql-server apache2
Os pessoas do XAMPP têm um binário do qual você pode instalar.
NÃO RELACIONADO: É justo dizer que é redundante usar o XAMPP, pois você pode conseguir a mesma coisa simplesmente usando os pacotes que estão no apt. Simplesmente instale o Apache, Perl, PHP e MariaDB e isso é o XAMPP (Você está no "askubuntu", então estou assumindo que você está no Ubuntu. O XAMPP é mais lógico se você estiver usando o Windows ou o Mac OS X.
sudo apt-get install php5 perl mariadb-server mariadb-client apache2 # The same thing as XAMPP
No que diz respeito às interfaces gráficas para gerenciar o Apache, consulte esta pergunta.