Você precisará criar um filtro USB para a impressora local (desde que, é claro, a impressora esteja conectada via USB e não paralela). Não sei como adicionar uma impressora no Ubuntu (lembre-se também que, se você ficar preso, os Fóruns do VirtualBox são uma boa base de recursos) .