O fornecimento de qualquer arquivo (por exemplo, $HOME/.bashrc ) é tão seguro quanto o que foi gravado nesse arquivo.
Para um exemplo extremo, se seu .bashrc contiver /bin/rm -rf $HOME , ele é muito inseguro.
Observe que o fornecimento não afeta nenhum shell pai .
Talvez você precise aprender mais sobre o SSH e como usá-lo com chaves públicas / privadas; leia algum tutorial SSH.