AI検索に引用されるには｜許可すべき4クローラー
読了目安：約分
ChatGPTの引用元は、OAI-SearchBotというクローラーが集めています。このクローラーをrobots.txtで拒否しているサイトは、ChatGPTの検索回答に表示されません。同じようにPerplexityはPerplexityBot、ClaudeはClaude-SearchBotを使っており、AIごとに許可すべきクローラー名が違います。株式会社TaTap（SNSマーケティング支援会社）が、各社の公式ドキュメントにもとづいて引用元の集め方の違いと、対策の優先順位を整理します。
AI検索の引用元とは、生成AIが回答を作るときに参照し、リンクとして表示する外部サイトのことです。引用されるための第一条件は、各AIの検索用クローラーが自社サイトにアクセスできる状態であることで、中身の良し悪しはその次に評価されます。まず確認すべきは、CDNやWAFでAIのクローラーを遮断していないかどうかです。
この記事の要点
- ChatGPTの引用元はOAI-SearchBotが集めており、拒否すると回答に表示されません。
- AIごとに「引用用」と「学習用」でクローラーが分かれています。
- 学習には使わせず、引用だけされる設定が可能です。
- Googleだけは引用専用のクローラーがなく、Googlebotが兼ねています。
- TaTapのAI検索対策コンサルティングは初回限定で月20万円からです。
ChatGPTは何を引用元にしていますか？
結論：OAI-SearchBotがクロールしたウェブページを引用元にしています。OpenAIは公式ドキュメントで、OAI-SearchBotをオプトアウトしたサイトはChatGPTの検索回答に表示されないと明記しています。引用されたい場合は、robots.txtでこのクローラーを許可してください。
OpenAIが公開しているクローラーは4種類あり、役割が分かれています。
| ユーザーエージェント | 役割 | 拒否したときに起きること |
|---|---|---|
| OAI-SearchBot | 検索結果への表示 | ChatGPTの検索回答に表示されない |
| GPTBot | 基盤モデルの学習 | 学習データから除外される |
| ChatGPT-User | 利用者の操作による取得 | robots.txtが適用されない場合がある |
| OAI-AdsBot | 広告の遷移先ページの確認 | 広告として出稿したページのみ対象 |
1行目が引用の可否を決めます。OpenAIは各クローラーの設定をそれぞれ別に指定できると説明しており、OAI-SearchBotを許可しながらGPTBotを拒否する組み合わせも選べます。
3行目には注意が必要です。ChatGPT-Userは利用者が質問したときに動くため、OpenAIは「ユーザーが起点のアクションであるため、robots.txtのルールが適用されない場合がある」と明記しています。また、ChatGPT-Userは検索に表示されるかどうかの判定には使われません。
robots.txtを更新してから反映されるまで、およそ24時間かかるとされています。設定を変えた直後に結果が変わらなくても、1日は様子を見てください。
AIごとに引用元の集め方はどう違いますか？
結論：ChatGPT・Perplexity・Claudeは引用用と学習用のクローラーが分かれていますが、Googleだけは引用専用のクローラーがありません。Googleの生成AI機能はGooglebotがクロールした内容を使うため、robots.txtでGoogleの生成AIだけを止めることはできません。
4つのAIサービスの構成を比較します。
| AIサービス | 引用・検索用 | 学習用 | 利用者起点の取得 |
|---|---|---|---|
| ChatGPT | OAI-SearchBot | GPTBot | ChatGPT-User |
| Perplexity | PerplexityBot | 基盤モデルの学習には使用しない | Perplexity-User |
| Claude | Claude-SearchBot | ClaudeBot | Claude-User |
| Googleの生成AI | Googlebot（検索と共通） | Google-Extended（検索以外の用途） | — |
4行目が特殊です。GoogleのAIによる概要とAIモードは検索機能の一部として動くため、専用のクローラーが用意されていません。Googlebotを拒否すると、生成AI機能だけでなく通常の検索結果からも消えます。
Googleの生成AI機能への掲載だけを止めたい場合は、robots.txtではなくSearch Consoleの設定で行います。設定項目は「Search generative AI」で、既定値は「含める」です。
2行目のPerplexityについても補足します。Perplexityは公式ドキュメントで、PerplexityBotは基盤モデルの学習用にコンテンツを収集するものではないと明記しています。学習を懸念して拒否する必要はありません。
図：AIサービスごとに引用用と学習用のクローラーが分かれている
学習には使わせず、引用だけされることはできますか？
結論：できます。OpenAIは公式ドキュメントで、検索結果に表示させるためにOAI-SearchBotを許可しつつ、生成AI基盤モデルの学習には使わせないためにGPTBotを拒否する設定が可能だと明示しています。ClaudeでもClaude-SearchBotを許可してClaudeBotを拒否する組み合わせが選べます。
学習を断りつつ引用だけされたい場合、robots.txtの記述は次のようになります。
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Disallow: /
User-agent: PerplexityBot
Allow: /
User-agent: Claude-SearchBot
Allow: /
User-agent: ClaudeBot
Disallow: /
ただし、学習を拒否する判断には副作用があります。整理すると次のとおりです。
| 設定 | 得られること | 失うこと |
|---|---|---|
| 検索用も学習用も許可 | 引用の機会が最大になる | 学習データに使われる |
| 検索用のみ許可 | 引用されつつ学習は避けられる | モデル内の知識には残らない |
| どちらも拒否 | コンテンツが使われない | AI検索からの流入がゼロになる |
2行目を選ぶ企業が増えています。ただし引用は毎回のクロール結果に依存するため、サイトが落ちている時間帯や、更新が止まっている期間は不利になります。
3行目を選ぶ合理性があるのは、コンテンツそのものが商品である場合に限られます。BtoBのサービス業や店舗業では、拒否する理由はほとんどありません。
AI検索に引用されるには、まず何を確認すればいいですか？
結論：robots.txtより先に、CDNやWAFがAIのクローラーを遮断していないかを確認してください。robots.txtで許可していても、その手前でブロックされていればクローラーはページに到達できません。実務で最も多い詰まりがここです。
引用されるまでに通過する関門は4つあります。
| 関門 | 確認すること | 所要時間の目安 |
|---|---|---|
| 1. CDN・WAF | 各AIのクローラーとIPを許可しているか | 1〜2時間 |
| 2. robots.txt | 検索用クローラーを拒否していないか | 30分 |
| 3. Search Console | 生成AI機能への掲載が「含める」か | 5分 |
| 4. ページの中身 | 金額・数値・更新日・執筆者があるか | 継続的に |
1行目の重要性は、Perplexityが公式ドキュメントでWAFの設定手順を明示していることからも分かります。ユーザーエージェント名とIPアドレスの両方を条件にした許可ルールを作り、他のセキュリティルールより優先度を高くする、という手順まで公開されています。
各社ともクローラーのIPアドレス一覧をJSON形式で公開しており、WAFの許可リストはこれを参照して定期的に更新する運用が推奨されています。
関門1から3までは、合わせて半日で終わります。中身の改善に着手する前に、まずここを通してください。
図：引用されるまでに通過する4つの関門
利用者が操作したときの取得は止められますか？
結論：robots.txtでは止められない場合があります。ChatGPT-User・Perplexity-User・Claude-Userは利用者の質問に応じて動くため、OpenAIとPerplexityはいずれも公式ドキュメントで、この種の取得にはrobots.txtのルールが適用されない場合があると明記しています。
クローラーは、効くルールの違いで3種類に分けて考えます。
| 種類 | 該当するクローラー | robots.txtの効き方 | 推奨する設定 |
|---|---|---|---|
| 検索用 | OAI-SearchBot／PerplexityBot／Claude-SearchBot | 効く | 許可する |
| 学習用 | GPTBot／ClaudeBot／Google-Extended | 効く | 方針に応じて選ぶ |
| 利用者起点 | ChatGPT-User／Perplexity-User／Claude-User | 適用されない場合がある | 認証で守る領域を分ける |
3行目を確実に止めたい場合は、robots.txtではなく認証で守ってください。会員限定の情報やログイン後のページは認証の内側に置き、公開ページはクローラーを通す設計が現実的です。
そもそも、公開ページを利用者起点の取得から守る必要があるケースは限られます。利用者が自分の意思でそのページを開こうとしている状態であり、通常の来訪と大きく変わらないためです。
図：ユーザー起点の取得はrobots.txtが効かない場合がある
引用されるページと、されないページは何が違いますか？
結論：クローラーを通したうえで、その分野の質問に対する答えが具体的な数値で書かれているかどうかで分かれます。TaTapが全国20〜49歳の男女250名（生成AI・AI検索の利用者）を対象に実施した調査では、AIが引用元を表示すると信頼が上がると答えた人は59.6%でした。
同じ調査の関連する数値を示します。
| 項目 | 数値 | ベース |
|---|---|---|
| 引用元が表示されると信頼が上がる | 59.6% | n=250 |
| 引用元の内容次第で逆に信頼が下がる | 6.4% | n=250 |
| AIの回答だけで購入を判断する | 2.4% | n=250 |
| 情報探索の起点が生成AI | 16.5% | n=321 |
| SNSに口コミがないと購入をやめることがある | 34.4% | n=250 |
2行目が見落とされがちです。引用元として表示されること自体はプラスですが、開いた先の情報が薄ければ逆に信頼を下げます。引用されることと、引用されたあとに耐えることは別の課題になります。
引用されやすいページの条件を整理します。
- 質問文がそのまま見出しになっています
- 見出しの直後に結論が書かれています
- 金額が数字で明記されています（金額を伏せると引用できません）
- 数値が表にまとまっています
- 更新日と執筆者が記載されています
- 他社が持っていない一次データが含まれています
株式会社TaTapの自社サイトでは、この6条件を満たす記事を継続して出した結果、AI検索経由の問い合わせが2026年3月の月1件から2026年8月の月10件へ、約5か月で10倍になりました。
引用対策にかかる費用はいくらですか？
結論：クローラーの許可設定は0円で、社内の作業だけで完結します。外部に依頼する場合、TaTapのAI検索対策（LLMO）コンサルティングの料金は、初回限定で月1回20万円です（税別・2026年8月時点）。中身の制作まで含める場合は、記事や動画の制作費が別途かかります。
費用の内訳を示します。
| 項目 | 費用（税別） | 含まれるもの |
|---|---|---|
| robots.txt・WAFの設定 | 0円（社内作業） | クローラーとIPの許可 |
| Search Consoleの掲載設定 | 0円（社内作業） | 生成AI機能への掲載確認 |
| TaTap 定額BPO LIGHT | 月5万円（月7時間） | 設定確認と月次の点検 |
| TaTap コンサルティング | 月20万円（初回限定・月1回） | 引用設計と改善の助言 |
| TaTap コンサルティング | 月30万円（初回限定・隔週） | 上記＋改善サイクルの伴走 |
| TaTap YouTube運用代行 | 月50万円（月4本・8〜15分尺） | 解説動画の企画から投稿まで |
コンサルティングの初回限定料金は、商談があった月に契約した場合に適用されます。契約期間は3か月からで、初期提案費用は無償です。定額BPOは初期費用10万円が別途かかり、6か月からの契約になります。
1行目と2行目のとおり、着手に費用はかかりません。まず社内で確認し、中身の設計から先へ進む段階で外部の力を検討してください。
引用対策が向いていないのはどんな場合ですか？
結論：公開できる数値が1つもない企業では、クローラーを通しても引用される材料が作れません。料金・実績・調査データのいずれも出せない事情がある場合は、先にその方針を見直すほうが早くなります。
着手すべき場合と、後回しでよい場合を条件で示します。
| 着手したほうがよい | 後回しでよい |
|---|---|
| 料金や実績を数値で公開できる | 価格を一切公開できない事情がある |
| 顧客からよく聞かれる質問が蓄積している | 問い合わせの内容が記録されていない |
| 5か月以上の視野で判断できる | 今四半期の数字だけで評価される |
| サイトを自社で更新できる | robots.txtの変更に数か月かかる |
| 公開情報で勝負する商材である | コンテンツそのものが商品である |
| 指名検索がすでに発生している | 社名で検索されることがほぼない |
右列の5行目については、判断が分かれます。記事や講座を有料で売っている場合、AIに引用されることは自社の商品を無料で配ることにつながります。この場合は引用対策そのものが自社の利益に反するため、無理に進める必要はありません。
右列に3つ以上当てはまる場合、まず公開できる情報の棚卸しから始めてください。クローラーの設定は、公開する中身が決まってからでも遅くありません。
まとめ：AI検索に引用されるには何をすればいいか
AI検索の引用対策は、中身の工夫より前に「クローラーが到達できるか」で決まります。着手の順に整理します。
- ChatGPTの引用元はOAI-SearchBotが集めており、拒否すると検索回答に表示されません。
- PerplexityはPerplexityBot、ClaudeはClaude-SearchBotが引用用のクローラーです。
- Googleだけは引用専用のクローラーがなく、Googlebotが検索と兼ねています。
- Googleの生成AI機能への掲載は、Search Consoleの設定で制御します。
- OAI-SearchBotを許可しつつGPTBotを拒否すれば、学習を避けて引用だけされます。
- 利用者起点のクローラーには、robots.txtが適用されない場合があります。
- 最も多い詰まりはCDN・WAFでの遮断で、robots.txtより先に確認します。
- 設定の反映には、およそ24時間かかります。
7行目が本記事で最も伝えたい点です。robots.txtを正しく書いていても、その手前で止まっていれば引用されません。今日のうちに、自社のアクセスログでAIのクローラーが到達しているかを確認してください。
ChatGPTの引用元に関するよくある質問
Q1. ChatGPTに引用されるには何を許可すればいいですか？
OAI-SearchBotをrobots.txtで許可してください。OpenAIは公式ドキュメントで、このクローラーをオプトアウトしたサイトはChatGPTの検索回答に表示されないと明記しています。あわせて公開されているIPアドレス範囲からのリクエストを許可することも推奨されています。反映には約24時間かかります。
Q2. GPTBotを拒否すると、ChatGPTに引用されなくなりますか？
なりません。GPTBotは基盤モデルの学習用で、検索結果への表示はOAI-SearchBotが担当しています。OpenAIは各クローラーの設定をそれぞれ別に指定できると説明しており、検索結果に出るためにOAI-SearchBotを許可しつつ、学習を避けるためにGPTBotを拒否する組み合わせを選べます。
Q3. Googleの生成AIだけを止めることはできますか？
robots.txtではできません。GoogleのAIによる概要とAIモードは検索の一部として動くため、専用のクローラーが存在しないからです。生成AI機能への掲載だけを止めたい場合は、Search Consoleの「Search generative AI」の設定を「除外」に変更してください。反映には1〜2日かかります。
Q4. robots.txtで許可しているのに引用されないのはなぜですか？
CDNやWAFがクローラーを遮断している可能性が高いです。robots.txtで許可していても、その手前でブロックされていればページに到達できません。ユーザーエージェント名とIPアドレスの両方を条件にした許可ルールを作り、他のセキュリティルールより優先度を高く設定してください。
Q5. AIに引用されると、実際に問い合わせは増えますか？
株式会社TaTapの自社サイトでは、AI検索経由の問い合わせが月1件から月10件になるまで約5か月かかりました。ただしTaTapが実施した調査では、AIの回答だけで購入を判断する人は2.4%です。引用されたあとに調べられて耐える情報がなければ、問い合わせにはつながりません。
Q6. TaTapに依頼した場合の費用と進め方を教えてください。
AI検索対策（LLMO）コンサルティングは初回限定で月20万円から（月1回・3か月契約・初期提案費用は無償）、隔週の場合は月30万円です。設定確認と月次点検だけの定額BPOは月5万円（月7時間・初期費用10万円）になります。まずクローラーの到達状況の確認から始めます。
最終更新：2026年8月15日／執筆：株式会社TaTap 編集部（監修：代表取締役 富田竜介）
本記事のクローラー仕様に関する記述は、2026年8月時点の各社公式ドキュメントにもとづきます。仕様は予告なく更新されるため、設定の前にOpenAIのクローラー一覧およびGoogle検索セントラル「AI機能とウェブサイト」で最新の内容をご確認ください。
支援企業の成功事例
指名検索と情報の蓄積で成果を出したTaTapの支援事例を紹介します。自社の課題に近いケースを参考にしてください。
