Это не правильная постановка вопроса. Серверу памяти надо выделить по-максимуму и дай бог, чтобы он всегда её использовал. Чем больше памяти у него будет в распоряжении, тем больше данных он сможет засосать и держать в кэше, тем быстрее будут последующие запросы. Попытка уменьшить размер закэшированных данных (отобрать память у сервера) без особой необходимости выглядит по меньшей мере странно, это все равно что вдруг захотеть отрезать себе мизинец - типа в настоящий момент его функциональность не требуется, значит нефиг болтаться без дела.

Процессу задана максимальная граница используемой памяти. Он имеет полное право её использовать в пределах границ по своему усмотрению. Если это много, то ограничь настройками верхний предел и всего делов