Não. O modo 4 é para 802.3ad - esse protocolo permite que o servidor fale com o switch e estabeleça uma interface de ligação nos dois lados do link. Se seus switches não forem compatíveis (ou você estiver usando switches que não são empilhados para formar um único grupo de canais que cruze os dois switches), o grupo de canais não será formado corretamente.
Você provavelmente deseja o modo 6, que oferece melhor balanceamento de carga e não requer suporte especial a comutadores. Em qualquer caso, não implemente a ligação em um ambiente de produção sem testar o failover e a taxa de transferência para ter certeza de que está obtendo o que você acha que deveria. Particularmente, tenho visto casos em que o desempenho de switches específicos se degrada em vez de melhorar.
Também, em muitos casos, envolvendo apenas dois pontos finais, você não obterá mais do que a largura de banda de um link no agregado na direção de recebimento. Isso significa que se você tem, por exemplo, box1 com um vínculo composto de links de 4 x 1gbps e box2 com um link de 10 gbps (não vinculado, apenas 10g), então box1 será capaz de transmitir para box2 a 4gbps, mas só será capaz de receber dados da caixa2 a 1gbps. A união realmente brilha apenas nos casos em que você precisa de mais largura de banda assimétrica entre dois pontos de extremidade, ou onde você tem muitos pontos de extremidade se comunicando. (Claro que se tudo que você precisa é de failover, é ótimo.)
Confira qualquer um dos inúmeros hits do google (como este ) para mais explicações sobre a ligação.
Espero que isso ajude.