iT-Ti.ruочерки сисадмина

Очерки сисадмина Linux и сети

Топ процессов по потреблению памяти в Linux

Опубликовано: Обновлено: 4 мин чтенияАвтор: Редакция iT-Ti.ru

Кто занимает всю память на сервере — один из первых вопросов администратора. Показываем команды ps, top, htop, smem и systemd-cgtop и объясняем, чем различаются RSS, VSZ и PSS.

Когда на сервере растёт нагрузка, мониторинг сообщает о нехватке памяти или в логе появляется OOM killer, нужно быстро найти виновника. Универсальный инструмент есть в любой системе: ps из пакета procps. Но с ним связана одна распространённая ошибка выбора столбца, о ней ниже.

ps: сортировка по RSS

Часто используют сортировку по size:

ps -eo size,pid,user,command --sort -size | awk '{ ms=$1/1024 ; printf("%.1f Mb ",ms) } {print $0}'

Столбец size в ps — это не занятая память, а приблизительный объём подкачки, который понадобился бы, если бы процесс изменил все свои записываемые страницы. Для вопроса «сколько процесс занимает оперативной памяти» корректнее использовать rss, резидентный набор в килобайтах:

ps -eo rss,pid,user,args --sort=-rss | awk 'NR==1 {print "MiB",$0; next} {printf "%.1f %s\n", $1/1024, $0}' | head -n 11

Команда выведет заголовок и десять самых прожорливых процессов. Пример вывода (значения иллюстративны):

MiB RSS    PID USER     COMMAND
1040.3  1065224 28599 username /usr/lib/firefox/firefox
 512.7   525000  1432 mysql    /usr/sbin/mysqld

Для краткого списка без длинных аргументов замените args на comm. Чтобы увидеть память по пользователям, добавьте суммирование:

ps -eo user,rss --no-headers | awk '{a[$1]+=$2} END {for (u in a) printf "%s %.1f MiB\n", u, a[u]/1024}' | sort -k2 -nr

Что означают RSS, VSZ, PSS

Показатель Что это
VSZ Весь виртуальный размер адресного пространства, включая отображённые файлы и память, которую процесс не трогал
RSS Страницы, находящиеся в ОЗУ. Общие библиотеки засчитываются в каждом процессе, поэтому сумма по всем процессам превышает реальность
PSS Доля общей памяти делится поровну между процессами, которые её используют. Сумма PSS даёт честную картину
USS Только память, принадлежащая исключительно процессу

На системах, где много процессов одной программы (веб-серверы с воркерами, PHP-FPM), сумма RSS нередко многократно превосходит физическую память именно из-за общих страниц.

top и htop

В top нажмите Shift+M, чтобы отсортировать по использованию памяти, или запустите:

top -o %MEM

В htop сортировка по памяти включается клавишей M; полезно добавить столбцы SHR и PSS через меню настройки. Дерево процессов (F5) помогает увидеть, чьи воркеры занимают память.

smem: честный подсчёт через PSS

Утилита smem (пакет smem) показывает USS, PSS и RSS:

sudo smem -rk -s pss | head -n 11
sudo smem -tk -u

Здесь -k включает читаемые единицы, -r обращает порядок сортировки, -s pss задаёт ключ, -u показывает сводку по пользователям, -t добавляет итог. Полный список ключей смотрите в smem --help.

Общая картина: free и systemd-cgtop

Прежде чем искать виновника, оцените общее состояние:

free -h

Смотрите на колонку available, а не free: Linux использует свободную память под дисковый кеш и отдаёт её по мере необходимости, поэтому малое значение free само по себе не проблема. Тревожные признаки — маленький available и активное использование swap.

Для систем с systemd удобно смотреть память по службам и контейнерам, которые собраны в cgroup:

systemd-cgtop -m

Ключ -m сортирует по памяти. Так видно, какая служба или контейнер в целом занимает ОЗУ, даже если её процессов десятки. Если систему уже прибил OOM killer, поищите следы в журнале:

sudo journalctl -k | grep -i -E "out of memory|oom"

Автоматизация

Список самых больших процессов можно сохранять в файл по расписанию и разбирать потом, когда проблема «ушла». О том, как настроить запуск по таймеру, см. заметку про cron в Linux. Для постоянного контроля настройте метрики памяти в системе мониторинга, например в Zabbix, а в проблемах оставляйте только понятные триггеры. Подробное описание полей ps есть в справке man ps и на странице проекта procps-ng.

Как читать результат

Один снимок не даёт полной картины. Если процесс медленно растёт из часа в час, это похоже на утечку памяти: сравните RSS одного и того же PID через равные промежутки времени. Если память занимает множество однотипных процессов, например воркеров веб-сервера, проблема чаще в их числе и настройках, а не в одном экземпляре. Не путайте кеш файловой системы с нехваткой памяти: он освобождается по требованию. А вот постоянный рост swap вместе с высоким si/so в выводе vmstat 1 показывает, что система действительно упирается в память и вытесняет страницы на диск.

Частые вопросы

Как посмотреть процессы, которые больше всего используют память в Linux?

Выполните ps -eo pid,user,rss,comm --sort=-rss | head. В top отсортировать по памяти можно клавишей Shift+M, в htop — клавишей M.

Чем отличаются RSS, VSZ и PSS?

VSZ — весь виртуальный адресный объём процесса, включая невыделенное. RSS — страницы, реально находящиеся в оперативной памяти, но общие страницы учитываются в каждом процессе. PSS делит общие страницы между использующими их процессами, поэтому суммы по PSS ближе к реальности.

Как понять, сколько памяти свободно на самом деле?

Смотрите колонку available в выводе free -h: она учитывает память, которую система может освободить, например дисковый кеш. Колонка free показывает только неиспользуемую совсем.