Você está tendo problemas devido a mais do que apenas latência. Na configuração padrão, o Remote Desktop faz um trabalho insatisfatório na manipulação de gráficos, fazendo com que até mesmo o servidor mais rápido ou a conexão com a Internet pareçam lentos.
Mas se você estiver executando jogos baseados em Flash, Silverlight ou DirectX, poderá criar esses jogos com gráficos intensos jogável por RDP com RemoteFX .
OMicrosoft RemoteFX is a Microsoft brand name that covers a set of technologies that enhance visual experience of the Microsoft-developed remote display protocol Remote Desktop Protocol (RDP) (Source: Wikipedia)
TechNet descreve alguns recursos e tipos de aplicativos que pode ser usado com o RemoteFX:
Silverlight and Flash applications
3D applications built on DirectX
Media player applications
Applications that are hosted on the Internet
Este blogueiro do withinwindows.com descreve algumas das suas experiências usando o RemoteFX para reproduzir jogos compatíveis com o DirectX:
...DirectX [is] one of the most compelling features of RemoteFX. To be able to play an accelerated game, like Unreal Tournament 3, over RDP on a laptop with unusable Intel graphics is just amazing.
Agora, eu disse que isso pode ser feito . Mas, para ser justo, o RemoteFX tem sérios requisitos. Afinal, é uma tecnologia de classe de servidor. Você desejará revisar esses requisitos, considerar se pode encontrá-los e decidir se o esforço (e possível custo extra) vale a pena para você. Aqui estão alguns recursos para você começar:
- RemoteFX vGPU Guia de configuração e configuração para o Windows Server 2012 (TechNet)
- GPU RemoteFX Requisitos (Blogs do MSDN)
- Serviços de Área de Trabalho Remota no Windows Server 2012/2012 R2 e Windows 8 / 8.1 (WindowsNetworking.com)