グーグルは2026年10月30日、ウェブサイトがAI学習への利用可否を複数のAI企業に対して一括で表明できる共通シグナルを、robots.txtでサポートする計画を発表しました。インターネット技術の標準化団体IETFの作業部会AIPREFでの議論を土台にしたもので、導入時期は2027年を見込んでいます(Google Search Central Blog)。
「ポリシートークン」で一括オプトアウトが可能に
新しい仕組みでは、ウェブサイト運営者はrobots.txt内に共通の「ポリシートークン」を記述するだけで、参加する複数のAI企業に対してAI学習の可否をまとめて指定できるようになります。これまではAI開発企業ごとに個別の記述を管理する必要がありましたが、この手間を解消する狙いです。
サイトがこのポリシートークンでAI学習をオプトアウトし、かつグーグル独自のクローラー制御であるGoogle-Extendedが明示的に指定されていない場合、グーグルはGoogle-Extendedも無効化されたものとして扱う方針です。
他のAI企業も同様の対応を取ることが想定されており、サイト運営者はすべてのAI企業に対して一括で拒否する選択肢と、企業ごとに個別調整する選択肢を併用できます。グーグルは2023年からGoogle-Extendedという独自のAI学習制御手段を提供してきましたが、これは今回の共通シグナルと並存し、今後も機能し続けるとしています。
なお、Google-Extendedを明示的に許可したサイトは、対話型AI「Gemini」アプリのグラウンディング機能を通じて回答に引用され、クリックを獲得する対象になる資格を持つとグーグルは説明しています。
