Para conectar duas interfaces de placa LAN Ethernet, pelo menos uma delas deve suportar Auto-MDIX, ou você precisará de um cabo Ethernet cruzado. Este é um cabo especial que conecta as linhas "TRANSMIT" de uma interface de placa LAN às linhas "RECEIVE" da outra e vice-versa. No entanto, se pelo menos uma das duas placas suportar o Auto-MDIX, a função cross-over será cuidada automaticamente.
Se você se preocupa com o hardware exato, veja o que a wikipedia diz sobre os cabos de crossover de ethernet
Se o cabo (ou o Auto-MDIX) não for o problema, configure os endereços estáticos e as máscaras de rede apropriadas e tente fazer o ping dos endereços IP um do outro para confirmar se o link funciona. Como não há (provavelmente) nenhum serviço DNS em execução, você precisará se referir a cada computador pelo seu endereço IP.