Hacker News · AI· twapi·· 8 時間前厳選AI スコア74
Google、OpenAI、Microsoft、Anthropicがrobots.txtの統一AI学習ディレクティブのサポートで連携
Google, OpenAI, and Anthropic back a shared robots.txt AI training signal
AI ガイド
Google、OpenAI、Microsoft、Anthropicは、新たなrobots.txt識別子「`__usage_ai-training`」への共同サポートを発表した。これによりWebサイト側は、Google-Extended、GPTBot、Claudebotを個別に設定する代わりに、単一のUser-Agent記述で主要モデル開発企業全体に対してAI学習への利用方針を宣言できるようになる。
推薦理由
大手4社によるrobots.txt表記の統一は、WebサイトがAI学習からオプトアウトする際の設定コストを削減するが、各社での適用スケジュールは異なり、強制力も欠いている。
出典:Hacker News · AI · coywolf.com