Em geral: você deve poder configurar seu servidor DHCP para atribuir concessões permanentes com base no endereço MAC a determinados clientes. Eu tenho DD-WRT configurado no meu roteador WRT54G para fazer exatamente isso - para que certas máquinas na minha rede sempre tenham o mesmo IP . Procure as opções no firmware do seu roteador, veja se elas estão lá: -)
O DHCP também lidará com a configuração de DNS e gateway - portanto, você deve inserir esses valores em seu servidor DHCP (você não especificou qual dos seus roteadores está lidando com isso) e os clientes irão buscá-lo automaticamente. Na verdade, essa é a principal função do DHCP!