Basta clicar com o botão direito em qualquer pasta e selecionar as opções de compartilhamento. Você deve poder ver a pasta compartilhada do outro computador.
BTW, você ainda pode alterar as configurações do seu roteador a partir da máquina Ubuntu. Abra o firefox / Chrome, digite o endereço IP do roteador (provavelmente 192.168.1.1 ou 10.0.0.1), digite usuário / senha (se solicitado) e altere a configuração como desejar.