Это прекрасно. Дополнительная память, используемая с течением времени, связана с кэшированием диска. Если для чего-то еще нужна память, кеш диска «отдаст». Я думаю, что нет заметных проблем с производительностью?
Вы можете увидеть, сколько памяти «реально» используется, посмотрев на строку, которая начинается с
-/+ buffers/cache: