Eu tive problemas com o pacote xRDP para 10.4. Eu baixei um pacote instalado a partir de 10.10 e funciona bem. Eu também tive problemas com alguns dos servidores VNC. Atualmente estou executando o vnc4server com sucesso.
Veja minha configuração para áreas de trabalho remotas com VNC e RDP para mais detalhes.