Finalmente descobri. Postado no caso de alguém ter problemas com isso.
Duas soluções:
Clique com o botão direito no painel > Preferências do painel > Modo > Deskbar
Se o modo horizontal for selecionado, vá para a seção de itens > Botões da janela e desmarque a exibição dos rótulos dos botões.