Microsoftと Google、AI学習の共通オプトアウトを支持

Microsoftは10月30日、自社のAI製品におけるウェブサイトコンテンツの利用に関する新ルールを発表した。サイト運営者は、モデルの学習への利用と、BingやCopilotの回答生成での利用を別々に拒否できる。拒否しても、ページは通常の検索結果に表示され続ける。同日、Googleも、AI学習を拒否する共通の仕組みを支持する意向を示した。

両社はIETFで策定中の標準を基にしている。運営者は複数のAI事業者に対する制限をまとめて指定でき、クローラーごとに個別のルールを書く必要がなくなる。

「学習」と「グラウンディング」

Microsoftは利用方法を二つに分けた。「AI Training」は、文章や画像などでモデルを学習させるもの。「AI Grounding」は、ユーザーの質問に答えるためにAIがサイトの内容を参照し、記事を要約したり出典リンクを示したりするものだ。

学習の拒否は、robots.txtに2行を加えれば、サイト全体に適用できる。これはインデックス登録とは無関係で、クロールが禁止されていなければBingの通常検索には表示される。グラウンディングの拒否はrobots.txtでは指定できず、HTMLのメタタグかHTTPヘッダーで行う。中間的な設定「ai-grounding:disallowextended」は、Copilotなど自社製品での利用は認めつつ、Web IQやFoundry API経由の第三者提供を禁じる。二つの制限は独立しており、何も指定しなければ両方とも許可とみなされる。

時期と限界

新ルールは2027年2月1日から、サイトの再クロールに合わせて適用される。従来のNoArchiveとNoCacheを使う運営者には、2027年3月1日までの移行期間がある。Googleは2027年中に対応する予定で、新しい指示で学習を拒否し、Google-Extendedに個別設定がない場合は、Googleの学習も拒否とみなす。Google-Extendedの個別設定は優先される。グラウンディングへの対応は未発表だ。

IETFの案はまだ正式な標準ではなく、指示は技術的な保護ではなく運営者の意思表示にすぎない。順守は各社次第だ。Microsoftは、グラウンディングを拒否するとAI回答での露出と流入が減る可能性があると説明している。利用を許可しても対価は支払われない。