Com base no que eu acho que você descreve: você não precisa de um switch gerenciado. Os switches funcionam na camada 2 (ethernet) e não se importam com a camada 3 (onde IPv4 e IPv6 estão). Às vezes, se você tem switches caros que tentam ser inteligentes, o switch observa as coisas da camada 3, por exemplo, a filtragem de segurança. Um pequeno interruptor simples não faz isso, então qualquer switch serve.
Com base em sua descrição, não posso prometer que conectar dois roteadores ao seu uplink funcionará. Você precisará do endereçamento e roteamento corretos e não tenho ideia de como sua configuração funciona.
Mas o switch não será o problema: -)