Não sou especialista em CX4s, mas em muitas outras matrizes, as portas do host têm a capacidade de estar no modo 'loop' ou 'switch' - algumas têm detecção automática. O modo 'Loop' é aquele que você usa para conexão direta, ou seja, sem um interruptor no meio. Veja se o CX4 tem essa opção nas portas que você conectou o servidor. Não há nenhuma configuração equivalente no servidor, você precisa fazer isso nas portas da matriz.
Como exemplo no seu EVA 4400, se você observar o Command View ou a interface da Web, poderá ver as portas do host e ver que elas serão definidas no modo 'Loop' (ou semelhante, não posso lembrar o termo exato) quando conectado diretamente.
De qualquer maneira, olhe para as portas do host da sua matriz, esperamos que haja uma seleção muito pequena de opções de configuração, uma delas funcionará para conexão direta.