ИИ-агенты уже заходят на сайты не как обычные боты из search console, и старый robots.txt тут работает не на все случаи. На фоне этого всплывает llms.txt — попытка отдельно обозначить, что можно читать LLM-моделям, а что лучше не трогать.
Для арбитража это не только SEO-история. Если у вас ленды, преленды, витрины и контентные прокладки живут на трафике из Google, Meta или Telegram, вопрос контроля агентов быстро становится вопросом сохранности связки: что индексируется, что утекает в обучение, что могут вытащить конкуренты 🤖
Пока это больше зона тестов, чем готовых правил. Но на длинной дистанции сайты без явной политики для роботов и LLM-агентов могут начать ловить сюрпризы — от лишнего сканирования до неожиданных дублей в выдаче.
Traffic Safari
@TrafficSafariPro
ИИ-агенты уже заходят на сайты не как обычные боты из search console, и старый robots.txt тут работает не на в
Этот пост опубликован в Telegram-канале Traffic Safari. Подписаться можно по ссылке: @TrafficSafariPro.