Топ процессов по потреблению памяти в Linux
Кто занимает всю память на сервере — один из первых вопросов администратора. Показываем команды ps, top, htop, smem и systemd-cgtop и объясняем, чем различаются RSS, VSZ и PSS.
Когда на сервере растёт нагрузка, мониторинг сообщает о нехватке памяти или в логе появляется OOM killer, нужно быстро найти виновника. Универсальный инструмент есть в любой системе: ps из пакета procps. Но с ним связана одна распространённая ошибка выбора столбца, о ней ниже.
ps: сортировка по RSS
Часто используют сортировку по size:
ps -eo size,pid,user,command --sort -size | awk '{ ms=$1/1024 ; printf("%.1f Mb ",ms) } {print $0}'
Столбец size в ps — это не занятая память, а приблизительный объём подкачки, который понадобился бы, если бы процесс изменил все свои записываемые страницы. Для вопроса «сколько процесс занимает оперативной памяти» корректнее использовать rss, резидентный набор в килобайтах:
ps -eo rss,pid,user,args --sort=-rss | awk 'NR==1 {print "MiB",$0; next} {printf "%.1f %s\n", $1/1024, $0}' | head -n 11
Команда выведет заголовок и десять самых прожорливых процессов. Пример вывода (значения иллюстративны):
MiB RSS PID USER COMMAND
1040.3 1065224 28599 username /usr/lib/firefox/firefox
512.7 525000 1432 mysql /usr/sbin/mysqld
Для краткого списка без длинных аргументов замените args на comm. Чтобы увидеть память по пользователям, добавьте суммирование:
ps -eo user,rss --no-headers | awk '{a[$1]+=$2} END {for (u in a) printf "%s %.1f MiB\n", u, a[u]/1024}' | sort -k2 -nr
Что означают RSS, VSZ, PSS
| Показатель | Что это |
|---|---|
| VSZ | Весь виртуальный размер адресного пространства, включая отображённые файлы и память, которую процесс не трогал |
| RSS | Страницы, находящиеся в ОЗУ. Общие библиотеки засчитываются в каждом процессе, поэтому сумма по всем процессам превышает реальность |
| PSS | Доля общей памяти делится поровну между процессами, которые её используют. Сумма PSS даёт честную картину |
| USS | Только память, принадлежащая исключительно процессу |
На системах, где много процессов одной программы (веб-серверы с воркерами, PHP-FPM), сумма RSS нередко многократно превосходит физическую память именно из-за общих страниц.
top и htop
В top нажмите Shift+M, чтобы отсортировать по использованию памяти, или запустите:
top -o %MEM
В htop сортировка по памяти включается клавишей M; полезно добавить столбцы SHR и PSS через меню настройки. Дерево процессов (F5) помогает увидеть, чьи воркеры занимают память.
smem: честный подсчёт через PSS
Утилита smem (пакет smem) показывает USS, PSS и RSS:
sudo smem -rk -s pss | head -n 11
sudo smem -tk -u
Здесь -k включает читаемые единицы, -r обращает порядок сортировки, -s pss задаёт ключ, -u показывает сводку по пользователям, -t добавляет итог. Полный список ключей смотрите в smem --help.
Общая картина: free и systemd-cgtop
Прежде чем искать виновника, оцените общее состояние:
free -h
Смотрите на колонку available, а не free: Linux использует свободную память под дисковый кеш и отдаёт её по мере необходимости, поэтому малое значение free само по себе не проблема. Тревожные признаки — маленький available и активное использование swap.
Для систем с systemd удобно смотреть память по службам и контейнерам, которые собраны в cgroup:
systemd-cgtop -m
Ключ -m сортирует по памяти. Так видно, какая служба или контейнер в целом занимает ОЗУ, даже если её процессов десятки. Если систему уже прибил OOM killer, поищите следы в журнале:
sudo journalctl -k | grep -i -E "out of memory|oom"
Автоматизация
Список самых больших процессов можно сохранять в файл по расписанию и разбирать потом, когда проблема «ушла». О том, как настроить запуск по таймеру, см. заметку про cron в Linux. Для постоянного контроля настройте метрики памяти в системе мониторинга, например в Zabbix, а в проблемах оставляйте только понятные триггеры. Подробное описание полей ps есть в справке man ps и на странице проекта procps-ng.
Как читать результат
Один снимок не даёт полной картины. Если процесс медленно растёт из часа в час, это похоже на утечку памяти: сравните RSS одного и того же PID через равные промежутки времени. Если память занимает множество однотипных процессов, например воркеров веб-сервера, проблема чаще в их числе и настройках, а не в одном экземпляре. Не путайте кеш файловой системы с нехваткой памяти: он освобождается по требованию. А вот постоянный рост swap вместе с высоким si/so в выводе vmstat 1 показывает, что система действительно упирается в память и вытесняет страницы на диск.
Частые вопросы
Как посмотреть процессы, которые больше всего используют память в Linux?
Выполните ps -eo pid,user,rss,comm --sort=-rss | head. В top отсортировать по памяти можно клавишей Shift+M, в htop — клавишей M.
Чем отличаются RSS, VSZ и PSS?
VSZ — весь виртуальный адресный объём процесса, включая невыделенное. RSS — страницы, реально находящиеся в оперативной памяти, но общие страницы учитываются в каждом процессе. PSS делит общие страницы между использующими их процессами, поэтому суммы по PSS ближе к реальности.
Как понять, сколько памяти свободно на самом деле?
Смотрите колонку available в выводе free -h: она учитывает память, которую система может освободить, например дисковый кеш. Колонка free показывает только неиспользуемую совсем.