O monitoramento de carga da GPU não é um recurso interno do Windows, mas existem ferramentas de terceiros para fazer o trabalho.
O GPU-Z é uma ferramenta de informações de placa gráfica que suporta várias opções de monitoramento para placas gráficas, como velocidades de clock, velocidade do ventilador, carga de memória, carga do GPU e carga do Video Engine.
Acredito que ele suporta placas gráficas ATI (AMD) e nVidia.
Esta é uma captura de tela do meu sistema durante a reprodução de um vídeo h.264.