As configurações de área de trabalho XFCE para os painéis são armazenadas em sua casa em ~/.config/xfce4/ e você deve ter os arquivos iniciais padrão para novos usuários em /etc/skek/ .
Você pode "redefinir" suas configurações copiando os arquivos de /etc/skel/.config/xfce4/ para o diretório /.config/xfce4/ .
Depois é só sair & novamente deve recarregar sua área de trabalho (reinicialização não é necessária).
O uso das próprias janelas de configurações do XFCE para alterar as coisas (temas em aparência, área de trabalho etc.) deve funcionar.
Como você disse que não há arquivos em /etc/skel/.config/xfce4/ , você deve ser capaz de apagar seus arquivos xfce4 atuais em ~/.config/xfce4/ (possivelmente usando uma segunda conta, no caso de apagar os arquivos enquanto você estiver logado pode causar eles sejam reescritos no logout) e as coisas devem ser redefinidas no próximo login.