Você é o proprietário de seu arquivo .Xauthority em seu diretório inicial?
Tente:
sudo chown username /home/username/.Xauthority
Substitua o nome de usuário por seu nome de usuário, por exemplo se seu nome de usuário for alex
:
sudo chown alex /home/alex/.Xauthority
E também garanta que as permissões estejam definidas corretamente:
sudo chmod 600 /home/username/.Xauthority