Tenho certeza que é (apenas) uma configuração no nível do usuário (HKey Current User). Se você editá-lo apenas para o seu usuário (através de políticas locais), então você pode simplesmente fazer o login como uma conta de administrador diferente e desfazê-lo para a seção de usuário relacionada (através do registro).
Se você estiver fazendo isso editando o registro, essa GP controlará a chave de registro HKCU\Software\Microsoft\Windows\CurrentVersion\Policies\Explorer .
Se isso não funcionar, outra opção é fazer login em outro computador na rede e usar o GPEdit.msc ou o Regedit para desfazer remotamente a lista de restrições que você implementou.
Para executar o GPEdit.msc em um computador remoto, você precisa executá-lo da seguinte forma:
gpedit.msc /gpcomputer: Computername