Considerando que o arquivo não pode ser movido, significa que ele está bloqueado ou em uso, o que sugere que você não deve excluí-lo.
Em vez disso, pesquise Localização no painel de controle e desative o provedor de localização nas configurações. Você pode precisar reiniciar depois disso.
Você não pode excluir arquivos que não podem ser movidos pelo mesmo motivo que eles não podem ser movidos.