Eu descobri o Control Masters, e usei isso para a segunda conexão para fazer as conexões após a primeira conexão quase instantâneas. Eu estou indo com a idéia de que 2 segundos é apenas parte do processo de conexão quando uma conexão é feita. A seleção de chaves específicas e a execução de várias opções de linha de comando não melhoraram muito os tempos em média.