A melhor maneira de descobrir é tentar. Acabei de instalar o DD-WRT no meu roteador há um mês. Demorou alguns dias para descobrir como fazê-lo, mas uma vez que você esteja preparado, a instalação real é muito simples.
Claro, minha situação não é sua situação. No meu caso, meu roteador estava perdendo conexões e retornando entradas espúrias de DNS. A instalação do DD-WRT parece tê-lo corrigido. Mas se você tiver que redefinir seu modem (não o roteador) para corrigir temporariamente seu problema, então parece que seu modem pode ser o culpado, não o roteador. Você comprou seu modem ou alugou do provedor? Eu sei que levei muitos modems e DVRs de volta ao escritório da minha empresa de TV a cabo e eles o substituem sem questionar. Você pode tentar primeiro, então tente substituir o firmware do roteador.
Se você fizer a substituição do firmware, pelo menos você terá um roteador e um geek mais capazes.