Você pode listar /lib e /usr/lib explicitamente em /etc/ld.so.conf ou um dos arquivos em /etc/ld.so.conf.d , assim os diretórios que vierem depois desses dois terão prioridade mais baixa na pesquisa.
Algo parecido com isto:
# contents of /etc/ld.so.conf
/lib
/usr/lib
/ParanoidAndroid
Não se esqueça de:
$ sudo ldconfig
E você pode verificar isso com:
$ ldconfig -v
Confirme as bibliotecas em /ParanoidAndroid em último lugar.
(Você pode ver avisos como ldconfig: Path '/lib' given more than once , mas provavelmente é o que você esperava, certo?)