OpenAI、robots.txtの共通の「AI学習」シグナルに対応へ　Microsoftも対応を表明

公表された内容の概要

• 何が発表されたか：OpenAIは、Webサイトの運営者が「自分のサイトの内容を生成AIの学習に使ってよいか」を robots.txt で示すための共通のシグナルを尊重すると発表した。複数のAI事業者で同じシグナルを使えれば、運営者が事業者ごとに設定する手間が減る、と説明している
• シグナルの中身：10月30日付で公開されたインターネットドラフト「Machine-Readable Training Preference Signal」（AnthropicのKevin Kelley氏が執筆）で定義されている。robots.txt の User-Agent の行に __usage_ai-training という目印を書き、通常の robots.txt と同じ書き方で、学習に使ってほしくない場所・使ってよい場所を指定する。ドラフトの例は次のとおり

User-Agent: __usage_ai-training
Disallow: /
Allow: /press-kit/

• ドラフトの位置づけ：IETF（インターネットの技術標準を定める団体）の個人提出のドラフトで、正式な標準ではない
• 既存の設定との関係：OpenAIは、これまで robots.txt で提供してきた設定（自社のクローラー向けの設定）を置き換えるものではなく、引き続き有効だとしている
• 時期：OpenAIは今後数か月のうちに対応を実装し、実装の詳細は改めて知らせるとしている
• Microsoftの対応：Microsoftも同日、生成AIの「学習」と、AIの回答の材料として使う「グラウンディング」を分けて、サイト運営者が別々に選べるようにすると発表した。2027年2月1日から、クロールの際に新しい設定を反映するとしている。どちらを選んでも、検索結果への掲載や流入、対価が保証されるわけではないとも書いている

クリエイターに関係する点

自分のサイトやポートフォリオで作品を公開しているクリエイターにとっては、AIの学習に使われるかどうかを、事業者ごとではなく1つの書き方で示せるようになる可能性があります。各社がいつから実際に反映するかは、今後の発表で確かめる必要があります。学習を拒む設定の考え方は、用語集の「オプトアウト（AIの学習利用）」もあわせて参照してください。