Eu acho que descobri. Quando você tem 2+ roteadores e cada um tem 2+ bandas sem fio (por exemplo, um é 2.4Ghz, o outro é 5Ghz), então a interface LAN - > Configurações físicas em todos os roteadores devem ter "Ativar STP" marcada. Eu estou teorizando que algum tipo de loop de rede ocorre porque existem 2 + caminhos em cada roteador. Se houvesse uma única banda sem fio, isso provavelmente não seria um problema.
Novamente, isso é um palpite, mas desde que eu habilitei o STP nos roteadores, o problema desapareceu.