Da minha experiência com o XFCE, o sistema tende a usar o monitor mais à esquerda para ícones e posicionamento do painel. Configurar o monitor que você quer usar, como primário, também diz ao sistema para preferir.
Isso também deve se aplicar ao KDE, eu acho.