Tente alterar o campo "Anexado a" no VBox para "NAT". Se você usar "Bridged", precisará especificar as duas extremidades da ponte todas as vezes e, portanto, ela mudará quando o adaptador de rede do seu laptop for alterado.
Se você quiser continuar usando uma rede de brigadas, basta fornecer mais uma ligação de adaptador: por exemplo, ter o adaptador 1 conectando sua máquina virtual à placa Ethernet e o adaptador 2 à ponte sem fio.