A resposta simples é que você não pode. Escrever e ler para trocar é feito pelo kswapd. Já havia resposta como é que [geralmente funciona] [1] - link
Se você não quiser reduzir o valor de Swap IN / Out, você pode verificar vm.swappiness
sysctl
param.
sysctl vm.swappiness
Você pode definir um valor menor para diminuir o uso do swap no sistema. Geralmente é ajustado para 60.