Do prompt de comando elevado (ou do arquivo .bat):
netsh interface ipv4 set dnsserver "Wireless Network Connection 2" source=static addr=8.8.8.8
netsh interface ipv4 add dnsserver "Wireless Network Connection 2" addr=8.8.4.4 index=2
ou
netsh interface ipv4 set dnsserver "Wireless Network Connection 2" source=dhcp
Você pode simplesmente substituir o ipv4 pelo ipv6 (e o endereço correto, é claro).