Use nice
para definir uma prioridade de agendamento mais baixa ao executar o comando ou use renice
para alterar a prioridade de um processo já em execução.
sudo nice -n 19 find . -type f -exec chmod 470 {} \;
Você pode alterar a localização para não retornar arquivos que já correspondem ao modo que você está definindo também:
sudo nice -n 19 find \! -perm 0470 -and -type f -exec chmod 470 {} \;