Não é a resposta que você quer ouvir, mas tivemos tantos problemas com switches distribuídos, mesmo com o 4.1, que não os usamos de forma alguma, muito menos para o iSCSI. Quanto aos benefícios, nenhum pula para a mente.
Estou projetando nosso farm do vSphere - estaremos migrando do ESX 3.5 para o 4.1. Eu pretendo configurar um novo farm usando o ESXi 4.1 e mover as máquinas virtuais no farm 3.5 para ele por meio do desligamento e, em seguida, importe.
No ESX 3.5, não há rede distribuída, portanto, cada host tem um vSwitch conectado a minhas SAN NICs e um grupo de portas para o vmkernel.
No vSphere (ESXi 4.1), tenho a opção extra de configurar um vSwitch distribuído e grupos de portas distribuídas para o vmkernel para acessar o armazenamento iSCSI.
Existe algum benefício nisso, ou devo me ater a redes não distribuídas para iSCSI.
Eu realmente acho que isso depende do seu ambiente e do número de hosts que você precisa gerenciar. Um dos maiores benefícios para o vDS é a capacidade de gerenciar centralmente a configuração de rede de todo o host em seu ambiente. Com um switch padrão, você teria que fazer essa alteração manualmente em cada host individual. Outro benefício é a eliminação da configuração de um etherchannel em seu switch físico, já que você pode usar os recursos de teaming baseados em carga disponíveis em vDS. Isso é apenas um casal que vem à mente. Espero que isso ajude.