Cloudflare разрешил запретить обучение ИИ — и не потерять Google
Ещё недавно у владельца сайта был неприятный выбор: либо разрешить всем подряд тянуть контент на обучение нейросетей, либо закрыться от ботов так, что из поиска выпадаешь вместе с ними. Cloudflare предложил третий вариант — Disallow AI Training. Теперь сайт может сказать «не обучайте на мне ИИ», но при этом остаться доступным для поисковых роботов. Google и Apple такие запреты уже уважают, а поддержка со стороны Bing пока в процессе.
Почему это важно именно сейчас. Контент — это то немногое, что у малого бизнеса есть своего, и он же — топливо для больших языковых моделей. Сайт с описанием услуг, статьями, кейсами, ценами годами работал на вас: приводил людей из поиска. Теперь тот же текст может стать частью чужой модели, которая перескажет его вашим же клиентам — но уже без вас, без вашего бренда и без ссылки на вас.
Что конкретно меняется
Раньше защита выглядела так: либо полностью закрыть доступ роботам через robots.txt, либо разрешить всем. Первое убивало SEO, второе — отдавало контент в обучение. Новый инструмент разводит эти две вещи по разным полюсам.
| Что делает сайт | Поиск | Обучение ИИ |
|---|---|---|
| Полный запрет ботам | Выпадает | Запрещено |
| Всё разрешено | Работает | Разрешено |
| Disallow AI Training | Работает | Запрещено |
Это не значит, что весь интернет немедленно закроется от нейросетей. Скорее речь о направлении, в котором движется рынок: право решать, отдавать ли свой контент на обучение, становится отдельным, самостоятельным выбором — а не побочным эффектом настройки сайта.
Что с этим делать малому бизнесу
Для большинства компаний вопрос звучит не «запрещать или нет», а «что я вообще теряю и приобретаю». Логика простая:
- Контент — ваше преимущество. Уникальные описания, экспертные статьи, разборы — если они уходят в модель без вашего участия, вы отдаёте конкурентный актив бесплатно.
- Но полная изоляция тоже вредна. Если вас нет в ответах ИИ, вы просто исчезаете из поля зрения тех, кто уже ищет через чат-боты. А это растущая доля аудитории.
- Компромисс — то, к чему стоит присмотреться. Оставаться в поиске и в ИИ-ответах как источник, но не отдавать текст на обучение — это уже реализуемая стратегия, а не теория.
Практически это значит, что настройки сайта превращаются в отдельную управленческую задачу. Не «сделали сайт и забыли», а регулярно решаем: что открываем, что закрываем, где хотим быть упомянутыми. Если сайт на конструкторе или у вас нет доступа к тонким настройкам роботов — это повод поговорить с теми, кто его ведёт.
Отдельный момент — сам контент. Если ваши тексты уникальны и полезны, они ценны и для людей, и для моделей. Если это набор общих фраз, который можно найти на сотне других сайтов, то и защищать особо нечего — лучше вложиться в то, чтобы текст стал своим. Защита имеет смысл только тогда, когда защищаешь что-то стоящее.
Частые вопросы
Если я закрою сайт от обучения ИИ, меня перестанут показывать в ответах ChatGPT и подобных?
Не обязательно. Запрет на обучение и запрет на цитирование — разные вещи. Инструмент позволяет остаться доступным для поисковых роботов. Но то, как именно конкретные ИИ-сервисы используют контент, зависит от них, и правила здесь ещё формируются.
У меня небольшой сайт услуг — мне вообще об этом думать?
Да, если у вас есть уникальные тексты: описания, статьи, кейсы. Именно они представляют ценность. Если контент типовой, приоритет стоит сместить в сторону его улучшения, а не настройки запретов.