O Xfce Goodies Project tem um plug-in que permite configurar e usar vários layouts de teclado:
plugins do painel: xfce4-xkb-plugin
% bl0ck_qu0te%Instale e use-o para alterar o layout do seu teclado para o brasileiro.
Nota:
Há um bug conhecido em que os usuários relatam que o plug-in é redefinido todas as configurações (idiomas utilizados e uma tecla de atalho do layout do switch) sempre que o sistema for reinicializado.
Se isso acontecer com você, já existe um trabalho nessa resposta do askubuntu .