Isso não está relacionado ao Xfce, mas ao lightdm (ou qualquer gerenciador de desktop que o Xubuntu esteja usando). O gerenciador da área de trabalho usa o PAM para autenticação. O PAM faz várias coisas, mas no final verifica seu /etc/shadow para a senha válida. Veja link como interpretar este arquivo. E use somente vipw -s para editar este arquivo.