AI学習を断る共通の書き方が出た。robots.txtで決めること

結論

2026年10月30日、「このサイトの内容をAIの学習に使わないでほしい」という意思を、AIの会社ごとではなく一つの書き方で伝える仕組みが、インターネットの技術標準を話し合う IETF に草案として出されました。同じ日に Google は、ほかのAI提供者とともに2027年にこの仕組みに対応することを目指すと公式ブログで発表しています。まだ草案で、各社が従い始めるのも先です。急いで書き換える必要はありませんが、自社の文章や写真を学習に使われてよいかを、会社として決めておく良い機会です。

何が決まったのか

草案の名前は「Machine-Readable Training Preference Signal」で、有効期限は2027年5月3日です。Webサイトの入口に置く robots.txt というファイルに、「__usage_ai-training」という名前のグループを書くと、その場所の内容を学習に使わないでほしい、という意思表示になります。robots.txt は、もともと検索エンジンなどの巡回プログラムに「ここは見に来ないで」と伝えるためのファイルです。草案は新しい命令を足さず、今の書き方のまま「使い道」についての希望を表します。

これまでは、学習を断りたいサイトが、Google なら Google-Extended のように、会社ごとに違う名前を調べて一つずつ書く必要がありました。Google は、共通の名前で学習を断っていて Google-Extended を書いていないサイトは、Google-Extended を断ったものとして扱う予定だとしています。会社ごとの今の指定も引き続き使えます。

気をつけたい三つの点

「User-Agent: *」では意思表示にならない

すべての巡回プログラムに向けた「User-Agent: *」のグループは、学習についての意思表示として読んではならない、と草案に明記されています。逆に、学習を断るつもりで「User-Agent: *」に「Disallow: /」と書くと、検索エンジンの巡回まで止まり、検索結果に出なくなるおそれがあります。

書かなければ「意思表示なし」

このグループがどこにもなければ、賛成も反対も表明していない扱いです。何も書かないことは、断ったことになりません。

学習と、AIの回答に出ることは別

Google によると、Google-Extended は将来の Gemini のモデルの学習のほか、回答のときに検索の情報を使う「グラウンディング」にも関わります。Google-Extended を許可しているサイトは、Gemini アプリの回答に出て、そこからクリックされる対象になります。一方、Google-Extended は Google 検索への掲載や順位には影響しないとされています。

自社サイトで、今決めておくこと

1. サイトの中身を分ける。会社案内のように広く知ってほしいもの、手間をかけて書いたコラム、権利を守りたい写真、といった分け方です。
2. 分けたものごとに、学習に使われてよいか、AIの回答で紹介されたいかを決めます。
3. ブラウザでサイトのアドレスの後ろに「/robots.txt」を付けて開き、今の中身を確かめます。
4. 自社で書き換えられるのか、制作会社やサービスの設定画面で直すのかを確かめます。
5. 書き換えるときは、会社ごとの今の指定を残したまま、共通の指定を足してもらいます。

robots.txt はお願いであって、ルールを守らない巡回プログラムを止める力はありません。本当に見せたくないものは、公開しない、ログインの後ろに置くといった別の手当てが要ります。