Não.
Os sistemas operacionais geralmente esperam acesso completo e exclusivo ao hardware. Para passar um dispositivo diretamente para um convidado, ele precisa ser liberado do controle do host. Atualmente, não há meios de compartilhamento de dispositivos entre sistemas operacionais. É listado como "passar" em vez de "compartilhamento", "arbitragem" ou algum outro sinônimo por uma razão.
Normalmente, no caso de placas gráficas, isso significa que você precisa de uma placa gráfica para o host e outra para o convidado. Usar gráficos integrados para o host pode permitir que você passe uma placa gráfica dedicada para o convidado.
Isso não significa que você não pode fazer o que você quer. Se você tivesse duas cartas dedicadas poderosas, o jogo no host e no convidado deveria ser possível. Não tenho certeza se gráficos integrados podem ser passados para o convidado (não convencidos de que o PCIe trava, a memória compartilhada pode causar problemas também), então você provavelmente precisaria de duas placas gráficas completas para ter uma potência gráfica significativa o anfitrião, bem como o convidado.