robots.txtでAI学習の拒否を一括指定へ|OpenAI・Googleが共通シグナルに対応表明

AI学習への利用意向を伝える共通シグナルを表すイメージ テック・AI

2026年10月30日、OpenAIとGoogleが、AIの学習へのコンテンツ利用についてウェブサイトが意向を伝えるための、robots.txtの共通シグナルに対応する方針を発表しました。AI提供企業ごとにルールを書き分けなくても、複数社へ同じ意向を一度に伝えやすくなる仕組みです。ただし、対応はこれからです。OpenAIは今後数か月以内、Googleは2027年を目指すとしており、今すぐ設定が必要になるわけではありません。両社の公式発表にもとづいて整理します。

robots.txtの共通シグナルとは?

これまでウェブサイト運営者は、AI提供企業ごとにクローラーを識別し、企業別にルールを管理する必要がありました。共通シグナルは、robots.txtの中に共通の「ポリシートークン」を書くことで、参加する複数のAI提供企業に、AI学習についての広い意向を一度に伝える仕組みです。Googleは、この仕組みがIETF(Internet Engineering Task Force)のAIPREFワーキンググループの作業にもとづくと説明しています。

Googleは、提案がまだ草案の段階にあることも明記しています。AIPREFで議論されている、そのほかの語彙については、引き続き関係者の議論が続いています。

OpenAIとGoogleの対応はいつから?

企業発表内容対応の時期
OpenAIrobots.txtの共通シグナルを尊重する方針。実装時に詳細を改めて公表する今後数か月以内を目指す
Google共通のAI学習制御を、他のAI提供企業とともにサポートする計画2027年を目指す

OpenAIは、この取り組みを自主的なものとして位置づけ、他のAI提供企業にも共通シグナルを尊重するよう呼びかけています。

Googleの「Google-Extended」はどうなる?

Googleは2023年から、AI学習向けの制御として「Google-Extended」を提供しています。発表によると、サイトが共通のポリシートークンでAI学習を拒否していて、Google-Extendedを明示的に指定していない場合、Googleはそれを「Google-Extendedを拒否した」ものとして扱う計画です。

  • 各社が個別に提供する既存の制御は、共通シグナルと並んで引き続き機能する
  • 共通シグナルで広い意向を示しつつ、Googleなど特定の企業向けには個別の制御で調整できる
  • Google-Extendedを明示的に許可したサイトは、GeminiアプリのグラウンディングにおいてAIの回答に表示され、クリックを得られる対象になる

今、サイト運営者は何をすればいい?

現時点で、共通シグナルはまだ運用されていません。OpenAIは対応時に実装の詳細を公表するとしており、Googleも進捗を更新すると述べています。両社の続報を待ってから設定するのが確実です。すでにrobots.txtで各社のクローラーを制御している場合は、その設定が引き続き適用されます。OpenAIも、既存のクローラー制御は引き続き尊重するとしています。

AI学習への利用を許可するか拒否するかは、サイトの方針と、AIの回答経由で得られる流入への期待を踏まえて決める必要があります。拒否する場合も許可する場合も、「Google-Extendedと共通シグナルをどう組み合わせるか」を整理しておくと、対応時に迷いません。

よくある質問

Q. 共通シグナルはもう使えますか?

A. まだ使えません。OpenAIは今後数か月以内、Googleは2027年の対応を目指すと発表しています。

Q. 既存のrobots.txtの設定は無効になりますか?

A. なりません。両社とも、既存のクローラー制御や企業別の制御は、共通シグナルと並んで引き続き機能すると説明しています。

Q. 共通シグナルはすでに標準になっていますか?

A. いいえ。Googleは「草案の提案」と説明しており、IETFのワーキンググループで標準化に向けた議論が続いています。

まとめ

robots.txtの共通シグナルは、AI学習への利用意向を複数社へまとめて伝えるための仕組みです。OpenAIは数か月以内、Googleは2027年の対応を目指しており、運用の詳細は今後の発表を待つ段階です。サイト運営者は、既存の設定を維持しながら、両社の続報を確認しておきましょう。

出典:Google Search Central Blog「Supporting a shared AI training control for websites」(2026年10月30日)
元記事URL:https://developers.google.com/search/blog/2026/10/ai-training-control
参考情報:OpenAI「AI 学習への利用意向をウェブサイトが伝えやすくする仕組み」(2026年10月30日)

コメント

タイトルとURLをコピーしました