Isso deve ser possível.
Existem muitos artigos sobre a configuração do SSH entre o Windows e o Linux.
Alguns que foram escolhidos aleatoriamente:
Configure o OpenSSH para ouvir em um endereço IPv6
como ssh para um ipv6 ubuntu em um LAN
Os problemas específicos de configuração do PuTTY estão detalhados no painel SSH do manual.
Se você deseja ver gráficos do Linux no Windows, consulte: