本文へスキップ
原文
Hacker News · AI· twapi·· 8 時間前厳選AI スコア74

Google、OpenAI、Microsoft、Anthropicがrobots.txtの統一AI学習ディレクティブのサポートで連携

Google, OpenAI, and Anthropic back a shared robots.txt AI training signal

AI ガイド

Google、OpenAI、Microsoft、Anthropicは、新たなrobots.txt識別子「`__usage_ai-training`」への共同サポートを発表した。これによりWebサイト側は、Google-Extended、GPTBot、Claudebotを個別に設定する代わりに、単一のUser-Agent記述で主要モデル開発企業全体に対してAI学習への利用方針を宣言できるようになる。

推薦理由

大手4社によるrobots.txt表記の統一は、WebサイトがAI学習からオプトアウトする際の設定コストを削減するが、各社での適用スケジュールは異なり、強制力も欠いている。

出典:Hacker News · AI · coywolf.com