Existe a ferramenta cpulimit (também está presente em debian repo e deve estar em outras distros).
O uso é bem simples:
cpulimit -p PID -l MAX_CPU_LEVEL
Você também pode usar o nome do processo ou o caminho completo para o binário. Detalhes que você pode encontrar na página do manual .