Você pode confirmar suas velocidades de internet? isso desempenha um papel enorme quando o desktop remoto está causando o atraso de entrada, etc.
Por que você não usa algo livre como o Teamviewer, a razão pela qual eu aconselho isso, pois você pode "otimizar" para Qualidade ou "otimizar" para Velocidade, etc.
Eu definitivamente recomendaria isso.
Espero que isso ajude