Basicamente, "sim"
Você pode configurar seu roteador para fornecer uma entrada DNS para o seu servidor apontar 'blah.example.com' para o IP local dos servidores locais (192 ....)
Se não, você gostaria de executar algum tipo de servidor DNS, como o dnsmasq, que permite adicionar facilmente esse tipo de entradas de DNS 'locais' ao seu lan.
Uma vez que você tenha este servidor dns funcionando, você gostaria de instruir seus clientes de lan para usá-lo, provavelmente através das configurações de DHCP em seu roteador. Novamente, se o seu roteador não permitir que você os altere, você também poderá executar o seu próprio servidor DHCP (apenas certifique-se de desativar aquele no roteador!).