Появился новый слой трафика, который многие пока недооценивают: ИИ-агенты уже заходят на сайт не как обычные б

Появился новый слой трафика, который многие пока недооценивают: ИИ-агенты уже заходят на сайт не как обычные боты, а как «пользователи с задачей».

И вот здесь старый набор правил начинает давать сбой. robots.txt по-прежнему нужен — но он работает в логике crawl access. А LLMs.txt, если индустрия его действительно дожмёт, будет про другое: что можно использовать для ответа, а что лучше не тащить в модель 🤖

Я слышал, как это обсуждают в командах SEO и продукта:
— что индексировать;
— что отдавать агентам;
— где ставить запреты;
— как потом измерять, что ИИ вообще пришёл именно к вам.

Это уже не просто техническая настройка. Это новая карта контента и доступа: какие страницы нужны людям, какие — поиску, а какие должны быть понятны агентам, но не становиться сырьём для чужих ответов.

Если раньше мы оптимизировали сайт под выдачу, то теперь придётся оптимизировать и под сценарии машинного чтения. И это не про хайп. Это про контроль канала, который уже начал влиять на видимость, цитируемость и трафик 📍