Eu já vi problemas como este antes. Meu palpite é que o seu PSU (fonte de alimentação) é insuficiente. Assim que um novo dispositivo com um dreno de tensão relativamente alto é conectado, sua distribuição de energia de + 5V é sobrecarregada, reduzindo assim a energia para o resto do sistema USB. Tente usar outra PSU e veja se isso ajuda!