Você pode usar Win + P para abrir a barra lateral "Projeto". Todas as configurações (clone, extend, only second) são acessíveis com teclado ou mouse.
Minha recomendação é usar "Segunda tela apenas" ao usar sua TV para jogar ou qualquer outra coisa.
Lembre-se de que o DPI misto ainda não é tão excelente, portanto convém configurar sua TV para 100% de escala. Não afetará os jogos de qualquer maneira.
Seu método previsto infelizmente não pode ser realizado. Nem os desktops “semi-virtuais” nem os ícones são exibidos nas duas telas. Bem, você sempre pode criar uma cópia de todos os ícones e colocá-los na segunda tela.