Однажды на клиентском VPS «внезапно» закончился диск, хотя по метрикам всё выглядело спокойно. Причина оказала

Однажды на клиентском VPS «внезапно» закончился диск, хотя по метрикам всё выглядело спокойно. Причина оказалась банальной и поучительной: логи приложения писались быстрее, чем срабатывали алерты, а ротация была настроена только на системные журналы. В итоге сервис начал падать не из-за нагрузки, а из-за заполненного /var.

После этого у нас в базовом чек-листе появились три вещи: отдельный мониторинг свободного места по критическим точкам, лимиты на размер логов и проверка ротации после каждого изменения в приложении. Плюс — запас в 20–25% диска под непредвиденные пики. 💡

Вывод простой: инфраструктура редко ломается «вдруг». Чаще она тихо предупреждает, но сигнал теряется в шуме метрик. Лучше ловить такие проблемы до аварии, а не после ночного простоя.