Abra o Gerenciador de Configurações do Compiz e procure por Scale Addons (confusamente na seção Utility, não com o plugin Scale regular em Window Management). A partir daí, clique na aba Aparência e abra a seção Título da Janela . Você encontrará um menu suspenso para a Exibição do título da janela , que você pode alterar para Todas as janelas .
Eu acredito que você também precise ter o pacote "compiz-plugins-extra".
Além disso, conforme mencionado por Pydave abaixo, certifique-se de que o Plug-in de texto (na seção Carregamento de imagem) esteja ativado.