Eu encontrei esta postagem: link
No meu caso, foi o suficiente para remover ~/.config/xfce4/xfconf/xfce-perchannel-xml/xsettings.xml (eu removi ~/.cache/sessions também).
Ainda não sei o verdadeiro motivo do problema.
Estou usando o Xubuntu 12.04 com o XFCE 4.8
Fontes em aplicativos baseados em Qt como o VLC parecem borradas no meu perfil de usuário, como se o anti-aliasing estivesse desativado. O Chrome tem o mesmo problema.
O problema não é todo o sistema: em outro perfil de usuário na mesma máquina, eu tentei alguns aplicativos Qt e eles parecem bem lá.