Sim, você pode usar endereços de link local ou APIPA e teria uma rede totalmente funcional. Pode não ser a rede mais fácil de usar, dependendo dos seus requisitos.
Você definitivamente seria melhor investir em um roteador. Até mesmo um roteador doméstico moderno (ou antigo) barato fornece a você muita funcionalidade, além de serem fáceis de configurar. Na minha opinião, um roteador de US $ 20 se pagará sozinho com DHCP e resolução de nomes. Você pode nunca tocar em nenhuma das funcionalidades avançadas, mas está lá se você precisar.