Microsoft и Google поддержали единый механизм запрета ИИ

30 октября Microsoft объявила о новых правилах использования содержимого сайтов в своих ИИ-продуктах, предоставив владельцам ресурсов новые инструменты контроля. В тот же день компания Google сообщила о намерении поддержать общий механизм запрета на обучение искусственного интеллекта. Инициативы обеих компаний направлены на упрощение взаимодействия между веб-мастерами и разработчиками алгоритмов машинного обучения.

• Новые правила позволяют разделять запрет на обучение моделей (AI Training) и использование контента в ответах (AI Grounding).
• Для управления доступом планируется использовать разрабатываемый в IETF единый стандарт, объединяющий требования для разных платформ.
• Изменения вступят в силу в 2027 году, предоставляя владельцам сайтов гибкие инструменты настройки видимости без исключения из поиска.

Разделение обучения и генерации ответов

Microsoft предлагает четко разграничивать два способа взаимодействия ИИ с контентом сайтов. Первый метод, AI Training, отвечает за использование текстов и изображений для фундаментального обучения нейросетей, после чего модель способна воспроизводить информацию самостоятельно. Второй метод, AI Grounding, подразумевает обращение системы к материалам в реальном времени для формирования точечных ответов пользователям с указанием ссылки на источник.

Для реализации ограничений разработчики предлагают использовать привычные инструменты веб-мастеров. Запрет на обучение можно установить через файл robots.txt специальными директивами. В свою очередь, для управления генерацией ответов предусмотрен специальный метатег в HTML-коде страницы или соответствующий HTTP-заголовок, который можно применять ко всему ресурсу целиком.

Планы Google и стандартизация IETF

Компания Google планирует внедрить поддержку общего запрета на обучение в течение 2027 года, ориентируясь на стандарты IETF. Если сайт заблокирует обучение через новую директиву, поисковый гигант автоматически распространит это ограничение и на свой механизм, хотя старые настройки Google-Extended также сохранят приоритет. При этом поддержку механизма AI Grounding поисковая система пока официально не анонсировала.

Важно отметить, что проект IETF в настоящее время еще не стал финальным утвержденным стандартом. Предложенные директивы являются скорее декларацией предпочтений владельца сайта, а не абсолютной технической защитой от несанкционированного копирования, поскольку их соблюдение полностью зависит от порядочности разработчиков ИИ-систем.

Значение для издателей и веб-мастеров

Новые правила открывают перед владельцами сайтов принципиально новый выбор: разрешать искусственному интеллекту обучаться на материалах, позволять использовать их в генеративных ответах или полностью ограничивать оба направления. При этом Microsoft открыто предупреждает, что полный отказ от AI Grounding может существенно снизить видимость ресурса в умных ответах и уменьшить потенциальный поисковый трафик.

Для бизнеса и создателей контента в регионе это означает необходимость заранее пересмотреть стратегии индексации и мониторить обновление стандартов IETF. Переходный период продлится до весны 2027 года, давая возможность корректно заменить устаревшие теги вроде NoArchive и NoCache на актуальные директивы без риска потерять позиции в классической выдаче.