OpenAI, Google, Microsoft и Anthropic совместно внедряют стандарт отказа от сбора данных для ИИ
Главный смысл: OpenAI, Google, Microsoft и Anthropic договорились поддержать единый стандарт отказа от сбора данных для обучения ИИ: сайты смогут одним общим заявлением запретить использование своих материалов сразу всем ИИ-компаниям, а не настраивать правила для каждой в отдельности. Это первый скоординированный шаг крупных ИИ-разработчиков навстречу издателям.
-
Кто предложил и как это работает. Стандарт в Инженерный совет Интернета (IETF) внёс технический руководитель Anthropic Кевин Келли. Управление встраивается в привычный robots.txt — файл, через который сайты и раньше запрещали обходчикам индексацию и архивацию страниц; теперь в нём появится единый сигнал о том, можно ли использовать контент для обучения моделей.
-
Календарь поддержки. Anthropic уже приняла стандарт. OpenAI планирует внедрить его в ближайшие месяцы, Google и Microsoft, по данным публикации, — только в следующем году. Meta ограничилась словами: представитель компании Энди Стоун поддержал идею универсального сигнала, но сроки не назвал.
-
Какую проблему решает. Сегодня издатель обязан отдельно объявлять свои предпочтения по ИИ-обучению каждой компании, а сборщики контента тем временем продолжают забирать материалы для тренировки моделей. Единая строка в robots.txt закрывает всю аудиторию разом и снимает настройку правил под каждого игрока.
Что дальше: Стандарт добровольный: robots.txt и раньше исполнялся обходчиками «на честном слове», и о принудительных механизмах в статье ничего нет — неясно, что будет с теми, кто запрет проигнорирует. Не раскрыты и технические детали: как именно сформулирован сигнал и когда IETF примет его как официальный стандарт. Четыре компании — ядро индустрии, но не вся она: про других активных сборщиков данных (Perplexity, ByteDance) в публикации ничего не говорится. Следить стоит за тем, начнут ли издатели массово включать новый запрет и обретёт ли он юридическую силу — через лицензионные соглашения или судебную практику.