Você terá que adicionar entradas no arquivo hosts de cada servidor, localizado em C: \ Windows \ System32 \ drivers \ etc \ hosts. Execute o Bloco de Notas como administrador, abra esse arquivo e adicione linhas como essa, uma linha por servidor:
xxx.xxx.xxx.xxx myserver
Eu aconselho que você invista no tempo para implantar o DNS em seu ambiente. O gerenciamento de arquivos de hosts não é dimensionável em relação a um punhado de máquinas.