УЛИКА #05: свободной RAM почти нет — правда ли дефицит?

Мы разбираем инфраструктуру по фактам: Linux, Zabbix, мониторинг, диагностика и архитектура. От симптома — к проверяемому выводу: что именно доказывает метрика, какие гипотезы остаются и как подтвердить решение. Без догадок там, где можно проверить. Если нужно понимать не только что сделать, но и почему — вам сюда.

memavailablememfreeswap
УЛИКА #05 Свободной RAM почти нет. Linux действительно не хватает памяти?

#УликиИнфры

Представим: Zabbix сообщает, что свободная оперативная память сервера заканчивается.

Заходим по SSH, выполняем:

free -h

И видим:

Вывод условный, для демонстрации.

Свободно всего 400 МиБ из 16 ГиБ. Более того, занято 1,2 ГиБ swap!

Кажется, оперативную память пора расширять.

Но посмотрим внимательнее.

Available: 9,0 ГиБ.

Почему показатели настолько отличаются?

1. Linux старается использовать RAM эффективно

Оперативная память нужна не только приложениям.

Linux использует её для кэширования файлов, дисковых данных и различных структур ядра.

Например, если приложение часто читает один и тот же файл, полезно сохранить его содержимое в page cache — файловом кэше.

Повторное чтение может обойтись без обращения к диску.

Когда приложениям потребуется дополнительная память, ядро может освободить часть кэша.

Поэтому большое количество кэшированных данных — не обязательно проблема. Это может быть нормальная работа системы.

Но важно учитывать: не вся память, обозначенная как кэш, может быть немедленно освобождена без последствий.

2. MemFree и MemAvailable — не одно и то же

Посмотрим на два поля /proc/meminfo.

MemFree — объём физической памяти, которая сейчас свободна.

MemAvailable — оценка объёма памяти, доступного для новых приложений без использования swap.

При расчёте MemAvailable ядро учитывает свободную память, часть файлового кэша, потенциально освобождаемые структуры ядра и резервные требования управления памятью.

То есть MemAvailable — не простая сумма MemFree и Cached.

Вернёмся к примеру:

MemFree ≈ 400 МиБ

MemAvailable ≈ 9 ГиБ

У нас нет оснований считать, что сервер испытывает дефицит RAM только потому, что MemFree мала.

Мало свободной RAM ≠ недостаточно доступной RAM.

3. А что со swap?

В нашем примере swap уже используется:

Swap used = 1,2 ГиБ

Это тоже не является самостоятельным доказательством текущей нехватки памяти.

Страницы могли быть вытеснены в swap раньше, когда нагрузка была другой, и с тех пор не понадобиться приложениям.

Важнее понять, происходит ли активный обмен между RAM и swap прямо сейчас.

Проверяем:

vmstat -y 1 5

Пример вывода команды vmstat -y 1 5

Обращаем внимание на два столбца:

si — поступление страниц из swap в оперативную память за секунду.

so — выгрузка страниц из оперативной памяти в swap за секунду.

Если swap заполнена, но si и so длительное время близки к нулю, это не подтверждает интенсивный обмен страницами в данный момент.

Если обмен устойчиво активен, особенно вместе с задержками приложений, продолжаем диагностику.

Занятая swap ≠ активная работа со swap.

4. Как обнаружить настоящее давление на память?

Современный Linux предоставляет механизм PSI — Pressure Stall Information.

Он показывает, насколько выполнение задач задерживается из-за нехватки ресурсов.

Для памяти:

cat /proc/pressure/memory

Пример:

some avg10=2.40 avg60=1.10 avg300=0.50 total=...
full avg10=0.30 avg60=0.12 avg300=0.04 total=...

Здесь:

some — доля времени, когда хотя бы одна задача задерживалась из-за давления на память.

full — доля времени, когда все задачи, способные выполнять полезную работу, одновременно испытывали такую задержку.

avg10, avg60, avg300 — усреднённые показатели за 10, 60 и 300 секунд.

Например, some avg10=2.40 означает, что за последние 10 секунд хотя бы одна задача испытывала задержку из-за давления на память примерно 2,4% времени.

Высокие и устойчивые значения PSI помогают обнаружить деградацию ещё до аварийного завершения процессов.

Но универсального порога для любых серверов нет: оценивать значения нужно с учётом конкретной нагрузки.

5. Какие признаки уже действительно тревожные?

Я бы искал сочетание нескольких наблюдений:

— MemAvailable устойчиво снижается до небольших значений; — приложения начинают работать медленнее; — возрастает PSI по памяти; — наблюдается интенсивный обмен страницами со swap; — процессы испытывают задержки при освобождении памяти; — появляются события Out of Memory.

Последнее особенно важно.

Если ядро не может удовлетворить запрос на выделение памяти, возможен запуск OOM Killer — механизма завершения процессов для освобождения ресурсов.

Проверяем журнал ядра:

sudo journalctl -k | grep -Ei 'out of memory|oom|killed process'

Пример вывода из journalctl

Обнаруженное событие OOM — сильная улика. Но нужно установить, произошло ли оно на уровне всей системы или из-за лимита отдельной службы либо контейнера.

6. Отдельная ловушка — контейнеры

Представим сервер с 64 ГиБ RAM.

На самом сервере доступно ещё 30 ГиБ.

Но контейнеру установлен лимит 2 ГиБ.

Приложение внутри контейнера достигает этого ограничения и завершается из-за OOM.

При этом у хоста в целом свободной памяти достаточно.

Для систем с cgroup v2 полезно проверить ограничения и события соответствующей группы:

memory.current

memory.max

memory.events

Эти файлы показывают текущее потребление памяти, установленный предел и события, связанные с ограничениями, включая OOM.

Достаточно RAM на хосте ≠ достаточно RAM для контейнера.

7. Чего не стоит делать

Не нужно автоматически очищать файловый кэш командой с drop_caches только ради увеличения MemFree.

Это не устраняет первопричину дефицита памяти, если она действительно существует.

Более того, после принудительной очистки система может начать повторно читать с диска данные, которые раньше находились в кэше.

Не стоит и добавлять RAM исключительно на основании процента «занятой памяти» в мониторинге.

Сначала необходимо выяснить, как именно рассчитан этот процент.

Например, показатель на основе MemFree и показатель на основе MemAvailable могут приводить к совершенно разным выводам.

Как проверить за минуту

Начальный набор команд:

free -h
grep -E 'MemFree|MemAvailable|Cached|SReclaimable' /proc/meminfo
vmstat 1
cat /proc/pressure/memory
sudo journalctl -k | grep -Ei 'out of memory|oom|killed process'

Если PSI недоступен в используемом ядре или конфигурации, соответствующего файла может не быть.

А при диагностике контейнеров дополнительно проверяем их ограничения и статистику cgroup.

Главная улика

Вернёмся к исходным данным:

RAM: 16 ГиБ

MemFree: 400 МиБ

MemAvailable: 9 ГиБ

Swap used: 1,2 ГиБ

По этим четырём значениям нельзя доказать дефицит памяти.

Нужно проверить динамику, давление на память и реальное поведение приложений.

Итог:

MemFree ≠ MemAvailable.

Много page cache ≠ нехватка RAM.

Заполненная swap ≠ постоянная деградация.

Отсутствие OOM ≠ отсутствие давления на память.

Высокий процент использования RAM ≠ необходимость её расширения.

Главный принцип диагностики:

Оцениваем не то, насколько заполнена оперативная память, а то, хватает ли её рабочей нагрузке без неприемлемых задержек.

#УликиИнфры #Linux #RAM #Memory #Диагностика #Мониторинг #ПоФактам

Читайте так же