O Windows usará toda a memória disponível não utilizada por um aplicativo para vários caches, sendo o maior deles o cache de disco. Se o seu servidor tiver uma quantidade moderada de atividade de disco e uma pequena quantidade de RAM (e 4 GB é pequeno), então não é surpresa que toda a sua RAM esteja sendo usada.
Assim, o fato de sua utilização total de memória ter aumentado quando você adicionou mais RAM significa que o Windows conseguiu armazenar efetivamente mais discos na memória. Isso é bom.