Você pode usar a variável de ambiente GLOBIGNORE . Suponha que você queira excluir o everithing, exceto /home/abdennour/android/documents/ e /home/abdennour/android/images/mlibrary/ , então você pode fazer o seguinte:
cd /home/abdennour/android/
export GLOBIGNORE="documents:images"
rm -rf *
cd images
export GLOBIGNORE="mlibrary"
rm -rf *
export GLOBIGNORE=""