Não, os dispositivos não precisarão "reautenticar". Desde que o SSID permaneça o mesmo e a senha (e em alguns casos o tipo de criptografia) permaneça, os mesmos dispositivos continuarão funcionando.
Isso é comum e ter um SSID e uma senha comuns permite o roaming ininterrupto entre os APs na mesma rede.