O SSH é uma ferramenta muito boa em algumas coisas, como o encaminhamento de programas individuais ou, com o Firefox, por exemplo, portas, transferência de dados, execução ou gerenciamento de servidores remotos.
Encaminhar uma área de trabalho inteira não é uma delas no entanto. Pode ser feito com atenção, mas o desempenho será lento.
Se você se conectar via ssh, você já está autenticado (logado no sistema), portanto não há necessidade de lightdm. Você pode iniciar uma sessão iniciando seu ambiente de área de trabalho.
ssh -XfC -c blowfish user@server xfce4-session
Altere xfce4-session para o DE ou WM de escolha. Desktops leves e sem muitos efeitos terão um desempenho muito melhor do que Unity e / ou efeitos 3D / transparência.
Outras opções são o fluxbox, openbox, lxde ...
Esse comando fará o login (via ssh) e iniciará o xfce no seu servidor XMing. As opções -X encaminham X, -f coloca ssh em segundo plano e -c usa compactação que acelera um pouco as coisas. O desempenho é aceitável em uma LAN, por exemplo (embora seja mais lento que o FreeNX ou o spice).
veja man ssh ou link
As opções para melhorar o desempenho em relação ao ssh são executar um painel em vez de toda a área de trabalho. Você pode então iniciar aplicativos graficamente, se desejar.
Você também pode usar uma cor, em vez de uma imagem, para o plano de fundo. Se você usa uma imagem, o ssh tem que constantemente reenviar a informação quando você move janelas por exemplo.
Se você deseja usar uma área de trabalho, use um servidor VNC "moderno". O FreeNX é multi-plataforma e é seguro e rápido. O FreeNX (NomachineNX) é, por exemplo, rápido o suficiente para transmitir música pela "internet" durante a execução de um desktop.
Veja o link
Outras opções possíveis incluem o uso de um aplicativo baseado na Web para gerenciar seu servidor, como o webmin (existem outras interfaces especializadas) ou uma conexão baseada na Web (vários serviços da Web estão disponíveis, por exemplo - link
Se você estiver usando máquinas virtuais, o spice é um servidor / cliente de várias plataformas que também é bastante rápido.