ChatGPT-User обходит `robots.txt` почти на каждой второй проверенной странице: в тесте OpenAI такой режим сработал на 54% адресов. OpenAI отдельно предупреждает, что это не обычный режим обхода сайтов, а отдельная схема работы бота.
Для айтишников это важный сигнал: правила доступа в вебе и поведение ИИ-агентов снова расходятся. Если у вас сайт, парсинг или антибот-защита, стоит проверить, как он реагирует на такие запросы уже сейчас.
IT Челябинск — t.me/it_chelyabinsk
IT Челябинск
@it_chelyabinsk
ChatGPT-User обходит `robots.txt` почти на каждой второй проверенной странице: в тесте OpenAI такой режим сраб
Источники:
Этот пост опубликован в Telegram-канале IT Челябинск. Подписаться можно по ссылке: @it_chelyabinsk.