Eu tentei isso no KDE 5 Plasma, tenho certeza que esse recurso está disponível no KDE 4too.
Clique com o botão direito do mouse na barra de tarefas (entre Bandeja do Sistema e Menu Iniciar do Aplicativo), clique em Configurações do Gerenciador de Tarefas e marque a opção Mostrar apenas tarefas da área de trabalho atual