Como você está fazendo balanceamento de carga entre os dois? Se você estiver usando uma distribuição DNS round-robin simples, se o agente de conexão ficar inativo (desde que esteja apenas fornecendo essa função única), os servidores de terminal deverão continuar a operar. As pessoas ainda poderão se conectar aos servidores, e a carga continuará a ser dividida entre os servidores.
A carga entre os servidores pode e será um pouco desequilibrada. Mas se você deixar espaço suficiente em seus servidores, isso provavelmente não será um grande problema.
Se uma pessoa perder a conexão, for desconectada e tentar se reconectar, ela poderá estar conectada a outro servidor. Nesse caso, eles teriam duas sessões abertas. Eles possivelmente perderiam alguns dados, particularmente se tentassem trabalhar em um arquivo que já estava aberto na outra sessão.