Se você não puder rastrear qual processo está usando isso, imagino que esse servidor provavelmente esteja em execução no Hyper-V ou no VMware ESXi (ou KVM ou Xen) e que haja um balão acontecendo. No Hyper-V isso é chamado de memória dinâmica. Nos outros produtos, é chamado de Ballooning.
O que acontece durante o balão é que quando o host físico está com pouca memória e outros convidados o exigem, o host "inflará" o driver de balão em hosts subutilizados, o que faz com que o driver de balão pareça consumir memória. Isso é feito para garantir que ele possa redistribuir com segurança esse fragmento de RAM física para outro convidado. Verifique as opções de utilização de recursos do host e memória dinâmica. Se você supercomprometeu sua RAM, isso é quase certamente o que está acontecendo.