Se houver uma frase secreta na chave SSH, ela sempre será solicitada em algum momento. No entanto, o SSH armazena em cache que, assim, um usuário interativo não é solicitado a digitar novamente a senha muitas vezes.
A frase secreta no SSH protege a chave SSH se ela estiver comprometida (sistema hackeado, laptop roubado, disco de backup roubado). Há casos em que é menos útil protegê-lo e uma chave SSH sem senha pode ser usada.