Новий спільний сигнал для навчання ШІ: чернетка IETF «Machine‑Readable Training Preference Signal»

30 жовтня 2026 року в IETF опубліковано індивідуальний Internet‑Draft «Machine‑Readable Training Preference Signal» (draft‑kelley‑aipref‑training‑preference‑signal‑00), автор — Кевін Келлі з Anthropic. Документ обсягом 10 сторінок запроваджує токен політики __usage_ai‑training: його вказують у рядку User‑Agent звичайної групи robots.txt, щоб висловити вподобання щодо навчання ШІ для кожного шляху окремо. Наведений приклад — «User‑Agent: __usage_ai‑training / Disallow: / / Allow: /press‑kit/»: навчання заборонене на всьому сайті, крім каталогу /press‑kit/.

Чернетка зберігає без змін синтаксис шляхів, правило найдовшого збігу та групову структуру robots.txt, не вводячи нових директив чи додаткової граматики. Крім того, у ній зазначено, що групи з символом підстановки (User‑Agent: *) НЕ слід тлумачити як такі, що стосуються токена; якщо жодна група не згадує __usage_ai‑training, сайт не висловив жодного вподобання. Сигнал стосується виключно використання вмісту для зміни параметрів генеративної моделі, а не поведінки краулерів (розділ 4.4); щоб обмежити сканування, і далі використовують токени окремих краулерів. У документі сказано, що його не схвалено IETF і він не має формального статусу в процесі стандартизації; якщо його не оновлять, він втратить чинність 3 травня 2027 року.

Та сама документація нагадує, що Google‑Extended — самостійний продуктовий токен і не впливає на включення сайту до Google Пошуку. Google заявляє, що має намір підтримувати сигнал AIPREF з початку 2027 року, зберігаючи окремим токен Google‑Extended, який не впливає на включення до результатів пошуку.

OpenAI 30 жовтня 2026 року оголосила, що дотримуватиметься сигналу і планує впровадити його найближчими місяцями, не замінюючи наявних засобів керування своїми краулерами; робота спирається на напрацювання групи IETF AI Preferences, і OpenAI закликає інших постачальників теж його прийняти.

Операційні невідомі та задокументовані прогалини - Чернетка поки що залишається індивідуальним документом і може змінитися до можливого офіційного ухвалення. - Сигнал — добровільне вподобання, а не механізм контролю доступу: краулери, що не співпрацюють, можуть його ігнорувати. - Немає першоджерел, які підтверджують, що сигнал поширюється на вже зібраний вміст або вже навчені моделі. - Конкретні терміни впровадження іншими постачальниками не підтверджені першоджерелами.

Якщо токен ухвалять, сайти зможуть висловлювати одне вподобання, чинне для всіх постачальників‑учасників, і відокремлювати навчання від сканування — замість окремого токена для кожного постачальника (GPTBot, Google‑Extended, ClaudeBot тощо).

— Pixie