Крупнейшие компании в сфере ИИ поддерживают новый способ отказа от скрапинга
OpenAI, Google, Microsoft и Anthropic заявили, что будут соблюдать единый общий токен политики в robots.txt — __usage_ai-training, позволяющий сайту одной строкой отказаться от обучения моделей ИИ всех этих компаний. Сигнал исходит из проекта интернет-стандарта IETF, предложенного Кевином Келли из Anthropic; Anthropic уже начала его внедрять, OpenAI планирует последовать в ближайшие месяцы, а Google и Microsoft нацеливаются на 2027 год. Это важно, поскольку сейчас издателям приходится задавать отдельные правила для каждой компании, хотя токен добровольный и не удаляет уже собранный контент.
ИСТОЧНИКИ
- Hacker News (AI)2026-10-31 04:49