Uma maneira de fazer isso é criar um arquivo insecure.key em branco primeiro e chmod it.
touch insecure.key
chmod 600 insecure.key
O que torna o diretório parecido com
total 28
drwxr-xr-x 2 flyte flyte 4096 Apr 17 11:44 .
drwxr-xr-x 12 flyte flyte 4096 Apr 17 11:44 ..
-rw------- 1 flyte flyte 0 Apr 17 11:44 insecure.key
-rw------- 1 flyte flyte 1746 Apr 17 11:42 secure.key
Em seguida, remova a frase secreta
openssl rsa -in secure.key -out insecure.key
O que torna o diretório parecido com
total 32
drwxr-xr-x 2 flyte flyte 4096 Apr 17 11:44 .
drwxr-xr-x 12 flyte flyte 4096 Apr 17 11:44 ..
-rw------- 1 flyte flyte 1679 Apr 17 11:45 insecure.key
-rw------- 1 flyte flyte 1746 Apr 17 11:42 secure.key
No entanto, isso é um pouco faff e seria melhor se houvesse um argumento para o openssl que faz isso de uma só vez.