Depende. Se o loop interno do seu programa se encaixar no cache L1 de ambas as CPUs e as velocidades de memória forem as mesmas, você não vejo muita diferença.
Se o loop interno se encaixa no cache de 6MB L2, mas não se encaixa no cache L2 da CPU com 6MB de cache L3, então o programa será mais rápido na CPU mais antiga com o maior cache L2.
Mas, em geral, a parte do loop interno de um programa é muito pequena.