Isso deve funcionar bem, mas a menos que haja uma diferença de plataforma (x64 v x86), não acho que você realmente precise instalar os drivers nas duas máquinas, apenas no host da impressora.
Na próxima vez que você iniciar a área de trabalho remota, marque a opção Printers em Local resources e ela deverá se configurar automaticamente.