Para um ambiente mínimo baseado em LXDE, você pode instalar lxde-core sem nenhum pacote adicional recomendado, em vez de lubuntu-desktop
sudo apt-get install --no-install-recommends lxde-common lxde-core
Isso lhe dará o gerenciador básico de janelas openbox , além do gerenciador de sessões lxsession e do gerenciador de arquivos pcmanfm . IIRC não instala um gerenciador de exibição, portanto, seu servidor continuará a inicializar em uma CLI e você precisará usar startx para obter o ambiente da GUI. Pode ser necessário criar um arquivo .xsession mínimo em seu diretório pessoal, por exemplo,
echo 'lxsession -e LXDE -s LXDE' > $HOME/.xsession