Se você não está usando nenhum controle de largura de banda, então as chances são de que a caixa do Win7 esteja saturando seu downpipe, causando perda de pacotes para quaisquer outras conexões.
Se o seu sistema operacional VirtualBox está baixando um arquivo enorme, sua caixa Win7 separada tem problemas de conectividade? Deveria. Isso seria normal.
Se eu estou baixando um linux iso e na verdade saturando minha internet, minha esposa tem problemas para navegar no Reddit. Isso é normal.