Google、OpenAIらとrobots.txtのAI学習拒否指示を支持

Googleは、OpenAI、Anthropic、Microsoftと並び、robots.txtに追加される新しい指示を支持すると発表した。ウェブサイト運営者が、自らのコンテンツを生成AIの学習に使わせるかどうかを、より簡単に管理できるようにする狙いだ。

企業ごとの設定が不要に

これまでパブリッシャーは、企業ごとのクローラーに対して個別のルールを書く必要があった。新方式では共通のシグナルを用意し、参加企業がそれを認識して順守する。

運営者は専用のユーザーエージェントを使い、AI学習に使わせたくないページやセクションを指定できる。報道ページや公開向けコンテンツなど、特定の部分へのアクセスを許可することも可能だ。

各社によると、この指示は検索結果への表示には影響せず、AIモデルの学習を目的としたデータ収集だけが対象となる。Googleは新しいシグナルを、Geminiの学習用に素材を集めるGoogle-Extendedユーザーエージェントへの指示として扱う。

2027年に段階的に導入

Anthropicはすでに新指示への対応を始めている。Microsoftは2027年2月1日から適用する予定だ。Googleは2027年初頭に対応を始める見通しで、OpenAIは今後数カ月以内に導入するとしている。

ただし、各社がすでに収集したデータには影響せず、今後のコンテンツ収集のみが対象となる。それでも、コンテンツ保有者が自らの作品の利用方法をより強く管理すべきだとの声が高まる中、AI企業とパブリッシャーの関係における重要な一歩といえる。