Sim, isso significa que o HAProxy não pode se conectar ao seu servidor SVN em sua porta designada (geralmente a porta 3690).
Você tem uma rota da máquina HAProxy para o servidor SVN? (ou seja, você pode fazer ping)? Em caso afirmativo, você pode se conectar à porta via telnet ou netcat (nc).
telnet <SVN_IP> <SVN_PORT>
Obviamente, se o HAProxy não puder falar com o servidor SVN, ele não poderá encaminhar o fluxo TCP.