Cloudflare разрешила выборочно управлять AI-ботами: теперь раздельно для поиска, обучения и агентов

Cloudflare вводит детальные настройки для AI-ботов, предоставляя всем клиентам возможность гибко управлять трафиком от роботов. Ранее можно было заблокировать их всех разом, теперь же администраторы сайтов могут раздельно контролировать три категории: Search (поисковые боты), Training (боты для обучения ИИ) и Agent (агентные боты).

Новая политика вступает в силу с 15 сентября 2026 года: на сайтах с рекламной поддержкой боты категорий Training и Agent будут заблокированы по умолчанию. Это шаг к более тонкой настройке взаимодействия с ИИ-системами, не затрагивая при этом работу поисковых роботов.