Abra as configurações do adaptador de rede (em Rede e Compartilhamento) e desative / desmarque o IPv4.
Concedido, você precisará garantir que seu ISP, modem e roteador também suportem IPv6 e o habilitem e configurem corretamente, mas, do ponto de vista do sistema operacional Windows, isso deve forçá-lo a usar o IPv6.