Se você realmente quiser comparar maçãs com maçãs, eu configuraria o Wordpress de acordo com suas especificações e compararia o desempenho lá. O problema em comparar o desempenho inativo de RAM dessas três distribuições como uma instalação básica sem o Wordpress é que ele está apenas testando o quanto ele usa ali.
A maior parte da sobrecarga das distribuições de desktop provavelmente está relacionada à operação do ambiente da GUI - provavelmente muito pouco do que o Wordpress depende é instalado por padrão. Por outro lado, a sobrecarga de uso de RAM do servidor Ubuntu (dependendo das opções que você fez quando o instalou) pode muito bem incluir muitas coisas que o Wordpress depende ou utiliza.
Além disso, a execução de uma GUI em uma máquina destinada a ser um servidor consome recursos e adiciona vulnerabilidades potenciais. Especialmente desde que você diz que é novo nisso, e você está hospedando um site público, eu o manteria o mais seguro possível. O Ubuntu Server (ou outra distro focada no servidor como Debian ou CentOS) provavelmente seria mais fácil de proteger.