Исправление ошибки «Too many open files» при работе с Nginx в Linux

Ошибка «too many open files» при работе Nginx указывает на то, что сервер достиг предела по количеству одновременно открытых файловых дескрипторов. Это может привести к проблемам с соединениями и даже отказу веб-сервера. Рассказываем, почему появляется ошибка «too many open files» и как её исправить.

Бесперебойная работа Nginx во многом зависит от системных лимитов на количество одновременно открытых файлов. Это важно для эффективной и быстрой обработки параллельных подключений и обслуживания веб-контента. Установленные ограничения определяют, сколько файлов, включая сокеты, Nginx может одновременно открыть. А при превышении лимита вы увидите ошибку «too many open files», которая может быть довольно неприятной, так как нарушает рабочий процесс и тормозит работу веб-сервера.

В этом материале мы рассмотрим распространённые причины «Error: Too many open files» и предложим несколько путей её устранения — в их числе общие, подходящие для любых процессов Linux, и специальные, подразумевающие изменение настроек Nginx.

Аренда VPS/VDS от 219 руб/месяц

Преимущества VPS в AdminVPS:

Аренда VPS/VDS виртуального сервера от AdminVPS — это прозрачная и честная услуга с доступной ценой

Причины ошибки

Прежде чем переходить к решениям, важно понять, почему возникает эта ошибка. Система Linux накладывает ограничения на число файловых дескрипторов, которые можно открыть одновременно. Когда процесс пытается превысить этот лимит, возникает ошибка «too many open files». На общесистемном уровне лимит контролируется командой ulimit и может быть скорректирован как глобально, так и для конкретных пользователей или процессов.

Так ошибка выглядит в терминале:

Эта ошибка не так безобидна, как кажется: она может привести к проблемам с подключениями, потере запросов и даже отказу Nginx от запуска или аварийному завершению работы веб-сервера.

Основные причины ошибки:

Неэффективное управление ресурсами. Приложения или скрипты, работающие на сервере одновременно с Nginx, могут быть плохо или непродуманно написаны и поэтому не освобождают дескрипторы после использования — в итоге это приводит к постепенному накоплению открытых файлов. Кроме того, между приложениями может возникать конкуренция за ресурсы.
Системные ограничения. Установлены ограничения, не соответствующие обычной нагрузке на систему и её возможностям, поэтому лимиты легко достигаются при росте трафика или одновременном запуске нескольких процессов.
Утечка ресурсов. Некоторые приложения могут иметь ошибки, которые приводят к утечке файловых дескрипторов и повышенному потреблению системных ресурсов.

Теперь рассмотрим несколько общих способов исправить ошибку «too many open files», а затем перейдём к настройке самого Nginx.

Настройка общесистемных ограничений

Чтобы избежать ошибки «too many open files», вы можете увеличить nofile (параметр, регулирующий лимит файловых дескрипторов, или открытых файлов). Для этого выполните следующие действия:

Вначале посмотрите текущее значение:

ulimit -n

Чтобы временно увеличить лимит, введите ulimit с флагом -n, через пробел укажите желаемое значение:

ulimit -n 2000

Если необходимо, чтобы новое значение сохранилось после перезапуска, откройте в редакторе конфигурационный файл /etc/security/limits.conf. Найдите в нём блок nofile (ххххх здесь — установленное ограничение):

*    soft    nofile    ххххх
*    hard    nofile    ххххх

В каждой строке укажите желаемое значение.

Обеспечьте закрытие неиспользуемых файлов

Проверьте, закрывают ли приложения и скрипты открытые файлы после использования. Вот пример блока кода для Python-приложений, который будет закрывать неиспользуемые файлы:

file = open('example.txt', 'r')
# Do operations with the file
file.close()  # Close the file descriptor when done

Мониторинг системных ресурсов

Чтобы обнаружить процессы, потребляющие много ресурсов, подойдут команды lsof (список открытых файлов) и strace (отслеживание системных вызовов). Их можно использовать с различными опциями. Например, если вам известен пользователь, из-под которого работает Nginx, то команда будет выглядеть так:

lsof -u <имя_пользователя>

Как установить лимит для Nginx

Вы уже знаете, как изменить общесистемные ограничения, но ошибку «too many open files» могут вызвать и ограничения, касающиеся самого веб-сервера. Поэтому перейдём к инструкции по настройке лимитов Nginx.

Откройте терминал.

Его можно запустить с помощью меню приложений или с помощью сочетания клавиш CTRL+ALT+T.

Проверьте текущую конфигурацию Nginx.

После запуска терминала нужно определить пользователя, под которым запущен Nginx. Эту информацию можно получить из nginx.conf. Чтобы вывести её в консоль, выполните следующую команду:

cat /etc/nginx/nginx.conf | grep user

Проверьте лимиты.

Затем проверьте существующие лимиты nginx-пользователя. Проще всего сделать это с помощью ulimit. Отталкиваясь от текущего значения, определите, какого количества файловых дескрипторов будет достаточно.

Откройте файл конфигурации с пользовательскими лимитами.

На этом этапе отредактируйте файл конфигурации, содержащий лимиты пользователя. Это тот же файл, который нужен для изменения общесистемных настроек, но теперь в нём нужно изменить параметры только для nginx-пользователя. Обычно он лежит в каталоге /etc/security/. Если файл не существует, создайте его вручную.

sudo nano /etc/security/limits.conf

Добавьте новые параметры.

Впишите в limits.conf указанные ниже строки. Обязательно замените <nginxuser> на имя вашего nginx-пользователя, а в конце, через пробел, укажите новые лимиты:

<nginxuser> soft nofile 4096
<nginxuser> hard nofile 8192

Параметр soft относится к мягкому лимиту, он может быть временно превышен пользователем. При достижении мягкого лимита система генерирует оповещение о приближении к пороговому значению. Hard — это жёсткий лимит, его нельзя обойти ни при каких условиях.

Сохраните файл.

В Nano это можно сделать, нажав Ctrl+O и Ввод, затем Ctrl+X для выхода из редактора.

Обновление конфигурации PAM.

Следующий шаг — обновление конфигурации PAM (Pluggable Authentication Modules), что будет гарантировать применение ограничений. Откройте в редакторе файл /etc/pam.d/common-session. Например, чтобы сделать это в Nano, выполните:

sudo nano /etc/pam.d/common-session

Пропишите в конце файла:

session required pam_limits.so

Примените изменения.

Для применения изменений перезапустите Nginx (с правами root).

sudo systemctl restart nginx

Проверка.

Убедитесь, что лимит увеличен:

ulimit -n

Вы должны увидеть заданное на предыдущих этапах значение.

Как войти в Ubuntu под root

Заключение

Ошибку «too many open files» в Nginx можно исправить, настроив системные ограничения Linux и веб-сервера, закрыв неиспользуемые файловые дескрипторы и отладив ресурсоёмкие процессы. Это имеет решающее значение для оптимизации производительности Nginx, особенно в сценариях с большим количеством одновременных подключений.

Читайте в блоге: