É possível, mas não sem software de terceiros.
Há um punhado deles, mas acho que esse será um truque Ext2Explore
Aqui é mais detalhado.
Basicamente, você irá instalar o programa como qualquer outro programa e depois navegar na sua partição do Ubuntu.
Embora o melhor cenário seja este:
Crie 3 partições iguais, uma vez para a instalação do Windows, uma para seus dados (deve ser NTFS) e, em seguida, sua partição Linux (Ubuntu). Se você fizer isso, poderá salvar / acessar seus documentos na partição de dados, independentemente do SO em que você está atualmente inicializado.