Eu finalmente encontrei isso vasculhando o registro de um dos meus computadores antigos.
A chave do registro que eu estava procurando é
HKEY_CURRENT_USER\Software\Microsoft\Windows\CurrentVersion\Explorer\Advanced\DisabledHotkeys
Se não estiver presente, crie um novo valor de string expansível e adicione os caracteres que você não deseja que o Windows Explorer vincule.
Por exemplo, definir DisabledHotkeys como 12
impedirá o explorador de vincular windowskey + 1 e windowskey + 2