NEWS & DOCUMENTARYAIと人間のこれから。
RAXUS AIAIのいまを確かめて届ける。
LATEST EDITION

OpenAI・Google・Microsoft、AI学習の共通拒否信号をrobots.txtで尊重する方針――IETFに個人草案「__usage_ai-training」

2026年10月30日、OpenAIがrobots.txtの共通信号を尊重する方針を公式に発表し、GoogleとMicrosoft Bingも同じ日にAI学習の共通制御への対応方針を示しました。IETFには、サイト運営者がAI学習の拒否を1つの設定で複数のAI企業に伝えられるpolicy tokenの個人草案「draft-kelley-aipref-training-preference-signal-00」が公開されています。提案されたトークンは`__usage_ai-training`です。これはAI学習への選好を伝える仕組みであって、クロールそのものを技術的に止めたり、著作権やライセンス料の取り決めを解決したりするものではありません。

OpenAIの発表は同社の公式フィードで「参加するプロバイダーに対してAI学習の選好を伝えるために、共通のrobots.txt信号を尊重する」と説明されています(発表本文の全文取得は本確認時点でできず、発表の題名・日付・公式説明をフィードで確認しました)。Googleは検索セントラルブログで、2027年にこの共通制御をサポートする計画を示しました。robots.txtに共通トークンによる学習拒否があり、Google-Extendedの指定が明示されていない場合、「Google-Extendedを拒否した場合と同様に扱う」方針です。企業別の既存制御は新しい信号と並行して機能し続けると説明しています。

図解発表と適用時期の流れ
  1. 個人草案の公開

    IETF Datatrackerにdraft-kelley-aipref-training-preference-signal-00。共通トークン__usage_ai-trainingを定義

  2. OpenAI・Google・Microsoftの方針

    OpenAIは共通信号を尊重する方針、Googleは2027年対応予定、Bingは新しい設定体系を発表

  3. Bingの適用開始

    クロール時にAI TrainingとAI Groundingの設定を尊重

  4. Bingの移行期限

    NoArchive/NoCacheを使うサイトは新設定への移行を案内

各社の公式発表(2026-10-30)とIETF Datatrackerによる。OpenAIの実装時期は「今後数か月」とThe Vergeが報道。IETF草案は承認済みの標準ではない。

草案では、robots.txtに「User-Agent: __usage_ai-training」というグループを書き、「Disallow: /」とすればサイト全体のAI学習利用を望まない意思表示になります。「Allow: /press-kit/」のようにパス単位の例外も書けます。学習を許可するのが既定で、設定を書かなくても動作は変わりません。草案は、ワイルドカードの「User-Agent: *」はこのトークンへの意思表示として解釈してはならない(MUST NOT)と定義しています。これは、全クローラー向けの既存設定が誤って学習拒否と読まれることを防ぐ規定です。

図解robots.txtに__usage_ai-trainingを書いたときの扱い

robots.txtのグループ__usage_ai-training

  • Disallow: /

    学習拒否の意思表示

    サイト全体のAI学習利用を望まないこと。参加プロバイダーが尊重する方針

  • Disallow: /example-path/

    パス単位の学習拒否

    指定したパスだけ学習しない意思表示

  • Allow: /press-kit/

    パス単位の例外

    学習拒否の中で指定パスを許可する書き方。記載がなければ許可が既定

  • User-Agent: *の既存ルール

    意思表示としては扱わない

    ワイルドカードグループはこのトークンへの表示として解釈してはならない(草案の定義)

draft-kelley-aipref-training-preference-signal-00(2026-10-30)による。個人提出のInternet-Draftで、IETFの承認した標準(RFC)ではない。

Microsoft Bingは、AI Training(学習への利用)とAI Grounding(生成回答の根拠としての利用)を独立に設定できる仕組みを発表しました。サイトやパス単位の設定はrobots.txtで、ページ単位の設定も可能です。新しいページ単位の設定DisallowExtendedは、grounding用途をAI Mode、AI Overview、Copilot、Microsoft 365などMicrosoft自身の体験に限定し、Web IQやFoundryのAPI経由で第三者に提供されるgroundingから外します。検索結果への掲載適格性は変わらないと説明されています。既存のNoArchiveとNoCacheは新しい設定に置き換わるため、これらを使うサイトは2027年3月1日までの移行を求められている。

この仕組みが扱うのは学習と回答生成への利用の選好で、それ以外の問題はそのまま残ります。草案自身が、このトークンはクロールの挙動を指示するものではないと定めており、悪意あるボットの遮断や、コンテンツ利用の対価、著作権の帰属を決めるものではありません。The Vergeは、OpenAI・Google・Microsoft・Anthropicの4社が共通トークンを見つけた場合にAIクローラーのアクセスを制限すると報じ、Anthropicがすでに信号を採用したと伝えています(Anthropicの実装状況の独立確認は本確認時点で未実施)。Metaの広報責任者も新しい設定への支持を示したと同紙は報じていますが、社内での尊重を明言したものではありません。

出典

  1. OpenAI「Making it easier for websites to express AI training preferences」(2026-10-30、公式フィードで発表を確認)OpenAI公式RSS(2026-10-30 09:30 GMT)で発表の題名・日付・公式説明(参加プロバイダーへの共通robots.txt信号の尊重)を確認。本文はCloudflareブロックで全文取得できず、実装時期「今後数か月」はThe Verge報道に帰属
  2. Google Search Central Blog「AI training control」(2026-10-30)2027年の対応予定、Google-Extendedの明示指定がない場合に共通拒否をG-E拒否と同様に扱う方針、既存の企業別制御の継続を確認
  3. Microsoft Bing Blog「Your content, your choice: clearer preferences for training and grounding」(2026-10-30)AI TrainingとAI Groundingの独立設定、2027-02-01適用開始、2027-03-01移行期限、ページ単位設定とDisallowExtended(AI Mode・AI Overview・Copilot・Microsoft 365に限定、Web IQとFoundry APIの第三者groundingを除外)、検索掲載適格性の不変を確認
  4. IETF Datatracker「draft-kelley-aipref-training-preference-signal-00」(2026-10-30、個人提出Internet-Draft)Kevin Kelleyによる個人草案(IETF未承認、expires 3 May 2027)、トークン__usage_ai-trainingの構文、パス単位ルール、User-Agent: *の不適用(MUST NOT)、クローリングとの独立性を草案本文で確認
  5. The Verge「The biggest names in AI are backing a new way to opt out of scraping」(2026-10-30)4社が共通トークン検知時にAIクローラーのアクセスを制限する方針、Anthropicの既存採用、OpenAIの実装時期「今後数か月」、Meta広報の支持(履行は未明言)を確認

出典の確認日 2026.10.30

KEEP EXPLORING

あわせて読みたい記事と映像

AIと社会の記事一覧
  1. Bitdefender、AIコーディング環境を狙う悪性GitHubコンテンツを分析──AGENTS.mdでの誘導と起動フックの2経路、悪性リンク22件

    セキュリティ企業Bitdefenderの研究部門Bitdefender Labsは2026年11月17日、AIコーディング支援ツールの利用環境を狙う悪性GitHubコンテンツの分析を公開した。研究者Andrei Anton-Aanei氏らが確認した悪性リンクは22件で、AGENTS.mdやCLAUDE.mdの文章でAIにsetup.jsの実行を誘導する経路に加え、.claude/settings.jsonのセッション開始フックでAIの判断を介さずコマンドを実行できる経路が報告されている。22件はリンクの数で、感染者数を示すものではない。

    記事を読む
  2. POSTECH、LLMが勾配学習なしでモデルの重みを直接書く「Weight-Space Programming」──3つのLLMが疎なテーブルを設計、ARCで最大54.4%

    POSTECH(韓国の浦項工科大学)のHyunjong Ok氏とJaeho Lee氏は2026年11月17日、勾配ベースの学習を使わず、大規模言語モデル(LLM)にモデルの重みを直接記述させる「Weight-Space Programming」の研究をarXivに公開した(arXiv:2611.22055)。Claude Opus 5.5、GPT-6.1 Sol、GPT-6 Astraの3モデルに10件のラベル付き例とサンドボックスを与えて実験したところ、アーキテクチャの設計を任せた3モデルすべてが、テキストで書いた事実を置く疎なテーブルと、それを読む固定の手続きでモデルを構成した。ARCの選択式テスト3,530問での精度は最大54.4%(偶然は25%)で、著者報告では、同じLLMが記述した最良の公開Transformerを約1,800分の1のパラメータで上回った。実験で作った56モデル(テキストファイル計68MB)をMITライセンスで公開しているが、測定・分析コードの大半は含まれていない。

    記事を読む
  3. Google GTIG、実際の侵入でAIエージェント基盤の悪用を観測──脆弱性調査と悪用の完全自動化を初確認、LLMJackingの被害は単日10万ドル超

    GoogleのGoogle Threat Intelligence Group(GTIG)とMandiantは2026年11月16日、四半期ごとの脅威観測レポート「GTIG AI Threat Tracker: Agentic Threat Activity Crosses a Significant Threshold」を公開した。複数の脅威アクターがオープンソースのマルチエージェント型ペネトレーション基盤(ARTEX、CAIRN、CyberStrikeAI、PentAGI)を悪用し、実際の侵入の個別の工程を自動化した事例を観測した。脆弱性の発見と悪用を人間の介入なしに完全自動化するLLM基盤の使用は、この四半期に初めて確認したという。LLM認証情報の窃取でクラウド資源を消費するLLMJackingでは、単日の不正請求が10万ドルを超えた事例があり、最も深刻な事例では累計100万ドルに達した。観測範囲は限られ、数値はGoogleの報告値。

    記事を読む