Sim, é possível fazer isso. Se você instalar o Ubuntu a partir de um disco ao vivo ou USB ao vivo, ele perguntará se você deseja apagar janelas ou instalar ao lado. Se você selecionar instalar ao lado toda vez que ligar o computador, ele solicitará que você inicialize o Ubuntu ou o Windows.