O Xfce fornece a Você essa opção na seção Settings => Keyboard under Layout . No entanto, não mostra nenhuma visualização, apenas uma lista simples.
Se você quiser ter um ícone em seu painel, como no Windows, você pode adicionar o widget xfce4-xkb-plugin . Aqui está bem explicado: link