AFAIK, você só pode definir afinidade de CPU para processos de espaço do usuário. Mesmo se fosse possível ligar partes do kernel a CPUs específicas, isso prejudicaria o agendamento do processo e quase inevitavelmente tornaria o sistema mais lento.
Existe um caso para essa abordagem em uma caixa NUMA - mas não para hardware convencional.