O overclock é feito geralmente a partir do BIOS. O BIOS pode ser acessado pressionando uma determinada tecla ao iniciar o computador. Não importa qual sistema operacional está sendo executado, por exemplo, as configurações serão aplicadas ao Linux e ao Windows.
Embora, esse chip esteja ficando um pouco antigo agora TBH: P