Usamos os mesmos comutadores para tráfego Ethernet normal e iSCSI sem problemas. Você só precisa se certificar de que o tráfego ethernet regular não afeta o tráfego iSCSI de forma alguma. Os comutadores Cisco modernos são geralmente de velocidade de linha (como em um switch de 1gbit de 24 portas com um backbone de 24gbps), para que você possa, em teoria, utilizar 1gbps por porta sem que nada seja prejudicado por ele.
Uma palavra de conselho, se você estiver indo para compartilhar os switches - certifique-se que você está 100% confiante de que o tráfego iSCSI realmente pousa no switch que você deseja. Nosso administrador anterior tinha um tronco entre os dois switches, e tinha o nic errado no interruptor errado. O resultado final foi uma grande falha quando o tronco caiu.
Minha maneira de fazer isso é limitar as portas. Usamos as portas de acesso novamente a SAN com uma VLAN específica e nas portas tronco para ESXi usamos "switchport trunk allow vlan 123" etc. Mesmo para os uplinks, onde configuramos os troncos para NÃO permitir que as vlan's iSCSI tenham 100% de certeza do tráfego iSCSI permanecendo isolado.
Edit: Ah, e não compartilhe switches se eles estão fazendo L3 - pelo menos não com opções de acesso como 2960's. Você realmente não quer acabar na situação em que a CPU atravessa o telhado e mata seu ASIC.