Não, isso é o que o Linux faz: ocupa a maior parte da RAM livre e a usa como cache. Se os processos precisarem de mais memória, o cache será liberado para esses processos.
A linha relevante é o "- / + buffers / cache", que indica que você tem 6.5 essencialmente livre. Além disso, você não está usando nenhuma troca, então você não atingiu uma situação de uso de memória alta.