Isso deve funcionar bem, mas a menos que haja uma diferença de plataforma (x64 v x86), não acho que você realmente precise instalar os drivers nas duas máquinas, apenas no host da impressora.
Na próxima vez que você iniciar a área de trabalho remota, marque a opção Printers
em Local resources
e ela deverá se configurar automaticamente.