OpenAI のクローラー：2026 年に向けた GPTBot、OAI-SearchBot、ChatGPT-User の解説

OpenAI のクローラーとは、OpenAI がオープンウェブのコンテンツを読み取り、取得するために送り出すユーザーエージェントです。1 つのボットではなく複数あり、それぞれに異なる役割があります。どれがどれかを知ることが重要なのは、設定するルールによって、コンテンツがモデルの学習に使われるか、ChatGPT の検索に表示されるか、あるいはその両方かが決まるからです。間違ったボットをブロックすると、知らないうちに AI の回答から外れてしまうことがあります。

これは、生成エンジン最適化の中心にある実践的で技術的なテーマです。ChatGPT の中で引用されたいなら、該当する AI クローラーがあなたのサイトにアクセスできるよう許可しなければならず、学習のためのアクセスと検索のためのアクセスの違いを理解する必要があります。この記事は、OpenAI 自身によるボットのドキュメントに直接基づいています。

OpenAI のクローラーとは何ですか？

OpenAI のクローラーとは、OpenAI に代わってウェブサイトにページを要求する自動化されたプログラムで、クローラーボットの一種です。ほかのウェブクローラーと同様に、ユーザーエージェント文字列で自らを名乗り、ほとんどの場合、robots.txt ファイルの指示に従います。OpenAI は各クローラーの IP アドレス範囲を公開しているので、OpenAI を名乗るトラフィックが本物かどうかを確認できます。

鍵となる考え方は分離です。OpenAI は目的ごとに異なるクローラーを運用しており、それぞれを個別に許可またはブロックできます。つまり、すべてか無かの判断ではなく、たとえば検索のインデックス登録は許可しつつ学習は断るといった、きめ細かな選択ができます。

GPTBot：学習用のクローラー

GPTBot は、OpenAI の生成 AI の基盤モデルの学習に使われる可能性のあるコンテンツを収集するクローラーです。ユーザーエージェントでは、OpenAI のドキュメントへのリンクとともに GPTBot と名乗り、その IP アドレス範囲は OpenAI が管理する JSON ファイルで公開されています。robots.txt で GPTBot を拒否すると、コンテンツをモデルの学習に使わないでほしいという意思表示になります。

重要なのは、GPTBot のブロックはあくまで学習だけに関わるということです。検索には別のクローラーが使われるので、GPTBot をブロックしても ChatGPT の検索から外れることはありません。学習への利用を制限しつつ AI の回答での可視性を保ちたい多くのパブリッシャーは、GPTBot だけをブロックし、検索用のボットは許可しています。

OAI-SearchBot：検索用のクローラー

OAI-SearchBot は、ChatGPT の検索機能の中にウェブサイトを表示させるクローラーです。ChatGPT が質問に答えるときにページを取得して引用できるようインデックスを作成するもので、学習データの収集とはまったく別のシステムです。ユーザーエージェントでは OAI-SearchBot と名乗り、その IP アドレス範囲も OpenAI によって公開されています。

可視性にとって最も重要なのがこのクローラーです。OAI-SearchBot を拒否すると、一部のナビゲーション用のリンクが残ることはあるものの、ページは ChatGPT の検索結果に表示されなくなります。このボットに対する robots.txt の変更が反映されるまでには約 24 時間かかるので、調整はすぐには効きません。これを許可することが、事実上、AI 検索で引用されるための条件です。

ChatGPT-User：ユーザーの操作をきっかけに取得を行うボット

ChatGPT-User は、人が ChatGPT やカスタム GPT に特定の URL を読むよう明示的に依頼したときや、ページの取得が必要な操作を求めたときにだけ動作します。自動的な大規模クロールは決して行いません。ユーザーエージェントでは、OpenAI のボットのドキュメントへのリンクとともに ChatGPT-User と名乗ります。

これらのリクエストは自動的なクロールではなくユーザーによって開始されるので、robots.txt のルールが ChatGPT-User には同じようには適用されない場合があります。また、関連する広告用のエージェントとして OAI-AdsBot があります。これはモデルの学習ではなく広告のランディングページの検証に使われるもので、やはり個別に管理できます。

OpenAI のクローラーが SEO と GEO にとって重要な理由

これらのクローラーは、ChatGPT での可視性の門番です。ChatGPT は読むことを許可されなかったページを引用できないので、robots.txt の設定ミスは、ブランドが AI の回答に登場しない理由として最もよくあり、しかも避けられるものの一つです。クローラーのアクセスを正しく設定することは、生成エンジン最適化のほかのすべての前提条件です。

この判断には戦略的な側面もあります。検索で引用されることは歓迎するものの、学習に使われることは望まないパブリッシャーもいて、クローラーが分かれていることでその立場をとることができます。ボットにコンテンツへアクセスさせて読ませるという一般的な実践は、AI に適用されたクロールにほかならず、検索エンジンに役立つのと同じ基本的な管理がここでも役立ちます。

OpenAI のクローラーを制御する方法

まずは方針を決めましょう。学習からはオプトアウトしつつ ChatGPT の検索での可視性を保ちたいなら、robots.txt で OAI-SearchBot を許可し、GPTBot を拒否します。AI での露出を最大化したいなら、すべてを許可します。完全にオプトアウトしたいなら、ChatGPT の検索での可視性を失うことを受け入れたうえで、それぞれを拒否します。各クローラーは独立しているので、ルールはユーザーエージェントごとに設定してください。

robots.txt を更新したら、検索用のボットの変更が反映されるまでに 1 日ほどかかることを覚えておき、OpenAI が公開している IP アドレス範囲と照らし合わせて実際のクローラーのトラフィックを確認しましょう。アクセスだけでなく、コンテンツそのものを解析できる状態にしておくことも大切です。クローラーは実際に読めるものしか引用しないので、重要な情報をクライアントサイドの JavaScript の背後や画像の中に隠さないようにしましょう。クリーンなアクセスを、しっかりとしたキーワード調査とコンテンツ計画と組み合わせれば、クローラーが到達するページを引用に値するものにできます。

課題と考慮点

最初の課題は、単純に変化についていくことです。OpenAI はユーザーエージェントを更新し、時間とともに新しいボットを追加しているので、1 年前に書いた robots.txt が現在のクローラーを反映していないこともあります。定期的な見直しが必要で、古いリストに頼っていると、守るつもりだったコンテンツを公開してしまったり、共有するつもりだったコンテンツをブロックしてしまったりします。

また、誰にでも当てはまる正解のない、本物のトレードオフもあります。クローラーを許可すれば可視性は高まりますが、トラフィックを送らずに質問に答えるかもしれないシステムにコンテンツを提供することになります。ブロックすればコンテンツは守られますが、急成長しているチャネルで見えなくなるリスクがあります。判断は、AI による発見とコンテンツの管理のどちらが自社のビジネスにとって重要かによって決まります。

まとめ

OpenAI のクローラーとは、OpenAI のためにウェブを読むボットで、学習用の GPTBot、ChatGPT の検索用の OAI-SearchBot、ユーザーの操作をきっかけに取得を行う ChatGPT-User に分かれており、それぞれを個別に制御できます。AI での可視性を目指すすべての人にとって、実践上の結論は明確です。ChatGPT に引用してもらえるよう検索用のクローラーを許可し、学習については意識的に選択しましょう。

さらに理解を深めるには、OpenAI や、より広いカテゴリーである AI クローラーと関連付け、Sorank の調査と計画のツールを使って、クローラーが到達するページを引用に値するものにしましょう。参考資料：OpenAI のボットに関するドキュメント、xSeek、Wikipedia。