Cloudflare обновил правила доступа ИИ-ботов к сайтам

15 сентября Cloudflare изменил правила доступа ИИ-ботов к сайтам, разделив блокировки обучающих и поисковых краулеров. Исследование по 1 046 сайтам показало, что после обновления запросы от имени обучающих ботов блокируются чаще, а от поисковых — реже, однако это тест с подставленными именами, и он не доказывает доступ настоящих краулеров.
15 сентября Cloudflare обновил правила доступа ИИ-ботов к сайтам. Блокируя сбор данных для обучения, владелец сайта может заодно закрыть поиск: часть ботов выполняет обе задачи одновременно.
Исследование компании Seensure по 1 046 сайтам показывает, что после обновления запросы от имени обучающих ботов стали блокировать чаще, а поисковых — реже.
Тест проводился с подставленными именами ботов, поэтому он не доказывает, что доступ к сайтам действительно изменился для настоящих краулеров.
Хабр ИИ · права на исходный материал принадлежат автору.
Материал носит информационный характер и не является индивидуальной инвестиционной рекомендацией. Операции с криптовалютами связаны с риском полной потери вложенных средств. Подробнее — «Отказ от ответственности».
Разборы событий, итоги дня и то, что двигает рынок. Без сигналов и обещаний — только факты и что они значат.
Читать в Telegram →По теме
- ▪Тестирование девяти скиллов для Claude Code: часть не отличается от пустышки, один ухудшил результатХабр ИИ · 8 октября
- ▪Прибыль TSMC за квартал выросла на 51%, выручка достигла $46,7 млрд3DNews · 8 октября
- ▪Microsoft добавит в Windows ИИ-агентов с доступом к локальным файлам3DNews · 8 октября
- ▪ICANN получила 1615 заявок на новые домены верхнего уровня от 481 заявителя3DNews · 7 октября