OpenAI robots.txt - OpenAI、サイト側の「AI学習に使わないで」を共通ルールで尊重へ。実装は今後数か月 anchor left anchor right

Nov 01 2026 AIニュース

OpenAI、サイト側の「AI学習に使わないで」を共通ルールで尊重へ。実装は今後数か月

anchor left anchor right

📖 この記事で分かること

  • OpenAI が 10 月 30 日に表明した robots.txt 共通シグナルの中身
  • いま使われている GPTBot 拒否との関係(置き換えではない)
  • 自分のサイトで意思表示したい人が今できること
  • 仕様がまだ下書き段階であるという注意点

💡 知っておきたい用語

  • robots.txt:Web サイトの入口に置く案内ファイル。「ここは自動で読まないで」と、読み回るプログラムに伝えるための決まった書き方
  • クローラー:Web ページを自動で読み回って集めるプログラム。検索エンジンや AI 企業が運用している

最終更新日: 2026年11月1日

▶ 公式ページ

OpenAI robots.txt - OpenAI、サイト側の「AI学習に使わないで」を共通ルールで尊重へ。実装は今後数か月

何が決まったのか

この記事のポイント

  • OpenAI は 2026 年 10 月 30 日、IETF 作業部会の成果に基づく robots.txt の共通シグナルを、生成AI基盤モデルの学習について尊重すると表明しました。
  • 実装は「今後数か月」(2026年11月時点)。既存の GPTBot による制御は置き換えないとしています。
  • 根拠となる仕様は Internet-Draft の段階で、2027 年 2 月 20 日が期限の版です。

自分のサイトやブログの文章を AI の学習に使われたくない人は、OpenAI 固有のクローラー名を調べなくても、共通の書き方でその意思を伝えられるようになります。OpenAI が 10 月 30 日に、IETF【アイイーティーエフ】(インターネットの技術標準を決める団体)の AI Preferences 作業部会がまとめた robots.txt の共通シグナルを、生成AI基盤モデルの学習に関して尊重すると表明したためです。

ただし、今すぐ何かが変わるわけではありません。OpenAI は実装を「今後数か月」としており、現在使われている GPTBot による制御はそのまま残すと説明しています。すでに robots.txt を設定しているサイトは、この発表を受けて急いで書き換える必要はありません。

これまでの仕組みと今回の違い

これまで OpenAI に「学習に使わないで」と伝える方法は、OpenAI のクローラーである GPTBot を robots.txt で拒否することでした。今回の表明は、その OpenAI 独自の方法に加えて、会社をまたいで通じる共通の書き方を受け付けるという内容です。

OpenAI のクローラー説明ページでは、GPTBot について「生成AI基盤モデルの学習に使われる可能性のあるコンテンツを収集する」クローラーだと説明しています。そして「GPTBot を拒否することは、そのサイトのコンテンツを生成AI基盤モデルの学習に使うべきでないという意思表示になる」としています。

この方法には、サイト運営者の側から見ると分かりにくさがありました。「GPTBot」という名前は OpenAI のクローラーの名前なので、意思表示をするには、まず相手の会社がどんな名前のクローラーを使っているかを知らなければなりません。別の AI 企業に同じ意思を伝えたいときは、その会社のクローラー名をまた調べることになります。

今回 OpenAI が尊重すると表明した共通シグナルは、特定の会社のクローラー名ではなく、「このコンテンツを AI 学習に使ってよいか」という意向そのものを robots.txt に書き込める形を目指すものです。詳細は次の章で説明します。

共通シグナルの中身

共通シグナルの土台は、IETF の作業部会が公開している Internet-Draft(標準になる前の下書き文書)です。この文書は、HTTP【エイチティーティーピー】(Web ページをやり取りする通信の決まり)で取得されるコンテンツに、利用上の意向を結びつける方法を定めています。

意向を付ける方法は 2 つあります。1 つは robots.txt(正式には Robots Exclusion Protocol)に書く方法、もう 1 つは HTTP ヘッダー(ページを送るときに一緒に付ける付加情報)に書く方法です。ドラフトは、この両方の書き方を定義しているとしています。

特に robots.txt については、ドラフトは既存の標準である RFC【アールエフシー】 9309(robots.txt の正式な規格文書)を更新して、利用上の意向を含められるようにするものだと説明しています。つまり、まったく新しいファイルや仕組みを作るのではなく、多くのサイトがすでに持っている robots.txt の規格を広げる形です。

一方で、この文書はまだ下書きの段階です。ドラフトの本文には「この Internet-Draft は 2027 年 2 月 20 日に期限を迎える」(2026年11月時点)と書かれています。IETF のドラフトは、期限までに更新されるか、正式な標準へ進むか、そのまま期限切れになるかのいずれかをたどります。今回 OpenAI が尊重すると表明した対象は、この確定前の仕様に基づくものだという点は押さえておく必要があります。

具体的にどの語句を robots.txt に書くのかは、このドラフト本文が定めています。この記事では確認できた範囲の要点だけを扱い、記述方法そのものには触れません。

サイト運営者にとって何が変わるか

会社のホームページや個人ブログを運営していて、文章や画像が AI の学習に使われることに抵抗がある人にとっては、意思表示の入口が 1 つ増えることになります。これまでは OpenAI 向けに GPTBot を拒否する、という会社ごとの対応が必要でしたが、OpenAI は共通シグナルも受け付けるとしているため、将来は 1 つの書き方で意向を示せる可能性があります。

いま GPTBot をすでに拒否しているサイトは、現時点で変更する必要はありません。OpenAI は既存の GPTBot による制御を置き換えないとしているため、今の設定は引き続き意思表示として機能します。共通シグナルの実装時期は「今後数か月」とされているので、実装が始まったことを OpenAI の公式ページで確かめてから、必要に応じて追記を検討する形で十分です。

「学習には使われたくないが、検索結果には出てほしい」という人にとっては、別の選択肢もすでに用意されています。OpenAI のクローラー説明ページは、検索結果への表示用のクローラーである OAI-SearchBot を許可しつつ、学習用の GPTBot だけを拒否する設定が可能だと説明しています。たとえば、自社の製品説明ページを ChatGPT の検索から見つけてもらいたいが、文章を学習データにはしたくない、という会社はこの組み合わせが当てはまります。

注意点は 3 つあります。1 つ目は、今回の発表は OpenAI の対応を述べたもので、この記事で確認できた範囲は、OpenAI の表明、IETF のドラフト、OpenAI のクローラー説明の 3 点だということです。他社が同じシグナルをどう扱うかは、この 3 点からは分かりません。2 つ目は、仕様が下書き段階であるため、確定版で書き方が変わる可能性が残っていることです。3 つ目は、robots.txt は「読まないでほしい」という案内であって、技術的にアクセスを遮断する仕組みではないことです。これは robots.txt という仕組み全体に共通する性質です。

編集部の見方

編集部は、今回の表明の価値を「今すぐ便利になること」ではなく、意思表示の書き方が会社ごとにばらつく状態が、解消に向かう入口に立ったことだと見ています。

  • 根拠 1: 現行の仕組みでは、OpenAI 自身の説明のとおり、GPTBot という OpenAI 固有の名前を拒否することが意思表示です。相手の会社ごとにクローラー名を調べる負担は、サイト運営者の側に残っていました。共通シグナルは、RFC 9309 を更新して robots.txt 自体に意向を含める形で、この負担を減らす方向を向いています。
  • 根拠 2: OpenAI は実装を「今後数か月」とし、既存の GPTBot 制御は置き換えないとしています。すでに設定済みのサイトが不利益を受けない形なので、運営者は確定を待ってから動けます。慌てて対応したあとに仕様が変わる、という手戻りが起きにくい移行です。
  • 根拠 3: 根拠となる仕様は、2027 年 2 月 20 日に期限を迎える Internet-Draft です。確定していない以上、今回の表明は「標準ができたら従う」という意思の表明として読むのが正確で、完成した制度として受け取るのは早いと見ています。

この見方が変わる条件は、ドラフトが期限までに正式な標準に進まず、別の形に組み替えられた場合です。その場合、OpenAI が尊重すると表明した対象そのものが変わるため、サイト運営者は改めて書き方を確認する必要が出てきます。


よくある質問

Q: いま GPTBot を robots.txt で拒否しています。何か変更が必要ですか?

A: 現時点では不要です。OpenAI は、既存の GPTBot による制御を今回の共通シグナルで置き換えないとしています。共通シグナルの実装は「今後数か月」とされているので、実装後に追記を検討する形で間に合います。

Q: 学習には使われたくないが、ChatGPT の検索結果には表示してほしい。両立できますか?

A: OpenAI のクローラー説明ページでは、検索表示用の OAI-SearchBot を許可し、学習用の GPTBot だけを拒否する設定が可能だと説明しています。この組み合わせが両立の方法です。

Q: この共通シグナルは、すでに決まった標準ですか?

A: まだ標準ではありません。根拠となる文書は IETF の Internet-Draft で、本文には 2027 年 2 月 20 日に期限を迎えると書かれています。確定版で内容が変わる可能性は残っています。


まとめ

OpenAI は 2026 年 10 月 30 日、IETF 作業部会の成果に基づく robots.txt の共通シグナルを、生成AI基盤モデルの学習について尊重すると表明しました。実装は「今後数か月」で、既存の GPTBot による制御は置き換えないとしています。根拠となる仕様は 2027 年 2 月 20 日に期限を迎える Internet-Draft で、確定前の段階です。すでに GPTBot を拒否しているサイトは今は変更不要で、実装の開始を公式ページで確かめてから動く形で十分です。


【用語解説】

  • IETF: インターネットで使われる技術の標準を、公開の議論を通じて決めている団体。今回の共通シグナルは、その中の AI Preferences 作業部会が取り組んでいる
  • RFC 9309: robots.txt の書き方を正式に定めた規格文書。今回のドラフトは、この文書を更新して利用上の意向を書き込めるようにするもの
  • Internet-Draft: IETF で標準になる前の下書き文書。期限が設けられており、更新や正式化がなければ期限切れになる

引用元:


この記事について: AI 支援で執筆、編集部が事実確認・編集しています。誤りや追加情報があれば Contact よりお知らせください。

anchor left anchor right
KOJI TANEMURA

15 年以上の開発経験を持つソフトウェアエンジニア / テクノロジーライター。AI エージェントの実務活用を研究し、現場や経営者向けセミナーでその知見を発信。本メディア tech-noisy.com では、一次情報に基づく最新ニュース・解説記事を執筆。また、音楽生成 AI による DJ パフォーマンスを企業イベントで行うなど、テクノロジーと表現の融合も探求している。