Google, OpenAI, dan Anthropic mendukung sinyal robots.txt bersama untuk pelatihan AI

Google, OpenAI, Microsoft, dan Anthropic mengumumkan pada 30 Oktober 2026 bahwa mereka akan mendukung satu token robots.txt bersama, __usage_ai-training, yang memungkinkan pemilik situs menetapkan satu preferensi pelatihan AI alih-alih token terpisah untuk setiap penyedia. Ini juga memberi Bing opsi penolakan yang sebelumnya tidak dimilikinya, karena situs harus mengizinkan Bing melatih konten mereka agar muncul di hasil pencarian. Sinyal ini bersifat sukarela dan tidak dapat ditegakkan, dan peluncurannya bertahap — hanya Anthropic yang mematuhinya saat ini, OpenAI berencana menyusul dalam beberapa bulan mendatang, Microsoft pada Februari 2027, dan Google pada awal 2027 — sehingga situs untuk sementara harus tetap menggunakan token lama per penyedia.

• Hacker News (AI)2026-11-06 17:56