Sempre verifique as páginas de manual se não tiver certeza. Nesse caso, man ssh
e man ssh_config
.
De man ssh_config
ConnectTimeout
Specifies the timeout (in seconds) used when connecting to the
SSH server, instead of using the default system TCP timeout.
This value is used only when the target is down or really
unreachable, not when it refuses the connection.
Você pode escrever isto no seu arquivo ssh_config ou passá-lo diretamente ao seu comando ssh:
ssh -o ConnectTimeout=$SECS $HOST