Acho que estávamos trabalhando demais.
Quando eu ssh em uma máquina, habilito o encaminhamento de X com o sinalizador -X .
ssh -X [email protected]
Em seguida, no terminal eu chamo o aplicativo, thunar (ou nautilus), sudo thunar , sudo gdebi-gtk , etc.
Isso só renderiza a interface do aplicativo em sua máquina e você não verá uma 'área de trabalho' completa de outra instância, mas o computador host continuará a funcionar sem interromper o vídeo na sua TV.
Veja se isso será adequado para você.