Диск заполнен, а du показывает, что места занято мало. В чём дело?
- Как найти, что занимает место на диске?
- Что такое inodes?
Частая причина — удалённый файл, который ещё держит открытым процесс (например, лог после ротации): имя исчезло, du его не видит, а место не освободилось. Найти: lsof +L1 или lsof | grep deleted; освободить — перезапуск процесса или усечение через /proc. Вторая причина — закончились inodes при множестве мелких файлов: df -i.
- df — место на файловой системе, du — сумма размеров видимых файлов
- Поиск больших каталогов: du -xh --max-depth=1 / | sort -h
- Docker: старые образы и логи контейнеров — docker system df
А ещё Ротацию логов настраивают с перезапуском или copytruncate, иначе проблема повторится
Подробно
Диагностика по шагам:
df -h # какая ФС заполнена
df -i # не кончились ли inodes
du -xh --max-depth=1 / 2>/dev/null | sort -h # крупные каталоги
lsof +L1 # удалённые, но открытые файлыУдалённый открытый файл. В Linux файл существует, пока есть хотя бы одна ссылка: имя в каталоге или открытый дескриптор. rm удаляет имя, а процесс продолжает писать в файл. Решение — заставить процесс переоткрыть файл (сигнал, перезапуск) или : > /proc/PID/fd/N для усечения.
Inodes — структуры описания файлов; их число задаётся при создании ФС. Миллионы мелких файлов (кэш, сессии) исчерпывают inodes при свободном месте — «No space left on device» при df -h 60%.
Профилактика: ротация и лимиты логов (logrotate, лимиты Docker log-driver), алерт на заполнение диска и inodes, очистка образов.
Что хотят услышать
- Удалённые открытые файлы и как их найти.
- Inodes.
- Последовательность диагностики и профилактика.
Проверьте себя
Один верный вариант. Подумайте, потом откройте ответ.
Показать варианты и ответ
- ✓Место держит удалённый, но открытый процессом файл, или кончились inodes
- ✗du всегда показывает то же, что df
- ✗du не учитывает скрытые файлы, начинающиеся с точки, поэтому занятое место занижено
- ✗Удаление файла всегда сразу освобождает место
Разбор темы
- Linux — диагностика сервера
С чего начинать, когда сервер ведёт себя плохо, как читать load average, где на самом деле свободная память, кто такие зомби и куда делось место на диске.
Связанные вопросы
Разбор собеседования с sotto
После собеседования sotto разбирает разговор: оценка, каждый вопрос — хорошо, частично или слабо, чего не хватило в ответе и над чем поработать к следующему разу. Первые 30 минут бесплатно.