Você também precisa olhar para RemoteFX que vem com o Windows 2008 R2 SP1 e, opcionalmente, com uma GPU no seu servidor TS e deve fazer o truque. Em uma rede local, você pode até mesmo fazer o Crysis sobre o RDP!
Você também precisa dimensionar apropriadamente o número de CPUs + GPUs de acordo com o número esperado de usuários simultâneos e a latência não deve ser muito alta, é claro.
Como um sidenote: no Linux, isso não é um problema, devido à suavidade de VirtualGL
e TurboVNC
.