Nama-nama besar di AI mendukung cara baru untuk menolak scraping
OpenAI, Google, Microsoft, dan Anthropic menyatakan akan menghormati satu token kebijakan robots.txt bersama, __usage_ai-training, yang memungkinkan situs menolak pelatihan model AI dari semuanya hanya dengan satu baris. Sinyal ini berasal dari draf Internet IETF yang diusulkan Kevin Kelley dari Anthropic; Anthropic sudah mulai menerapkannya, OpenAI berencana menyusul dalam beberapa bulan ke depan, dan Google serta Microsoft menargetkan 2027. Ini penting karena penerbit saat ini harus menetapkan aturan terpisah per perusahaan, meski token ini bersifat sukarela dan tidak menghapus konten yang sudah dikumpulkan.
SUMBER
- Hacker News (AI)2026-10-31 04:49