В CERN на входе не «сохраняют всё», а жёстко режут поток. И это хороший антипример для всех, кто верит в магию

В CERN на входе не «сохраняют всё», а жёстко режут поток. И это хороший антипример для всех, кто верит в магию «поставим побольше диска — и переживём».

Факт из экскурсии: на лентах архива уже больше эксабайта данных, но до хранилища доезжает лишь крошечная доля. Остальные 99,99% отбрасываются на ранних этапах. Иначе инфраструктура просто захлебнулась бы — не по мощности, а по управляемости.

Что здесь важно для вебмастера и техдира:
1. Фильтрация дешевле хранения. Как и в логах, бэкапах и событиях — сначала отсекаем мусор, потом думаем про архив.
2. Архитектура строится на долгий срок. В CERN систему проектируют на десятилетия, а не на «дотянуть до конца квартала».
3. Узкое место обычно не диск, а цепочка принятия решений. Если всё складывать без сортировки, вы сами создаёте инцидент.

Холодный вывод: хорошая инфраструктура — это не про «сохранить всё», а про то, чтобы заранее знать, что именно не нужно хранить. ⚙️