AIクローラーが自社サイトへ何回ページを取りにきて、その見返りに何人送り返してきたのか。その比を1つの数字にしたものが「AIクローラーの流入比」、英語で crawl-to-refer ratio です。2025年にCloudflareが公開してから、AnthropicやOpenAIの値が繰り返し引用されています。
ところが、同じAnthropicの比率として世に出ている数字は1つではありません。70,900対1、38,000対1、23,951対1、11,122対1、10,300対1、4,580対1、2,237対1。7つとも出どころはCloudflareで、約13か月のあいだに公表されたものです。同じ月に公表された2つのあいだにさえ、約17倍の開きがあります。
どれかが嘘なのではありません。数えている窓と対象が違うだけです。この記事では、値が食い違う4つの分母を一次情報で特定し、受け取ったその場で使える3つの質問に落とします。あわせて、当社が計測しているサイトのGA4でも同じ現象が起きている実測を出します。
この記事でわかること
- 構造： 食い違う原因は観測期間・クローラーの種類・サンプル構成・リファラーの欠落の4つで、Cloudflare自身が公開資料で認めているものを含みます。
- 点検： 数字を受け取る前に聞くのは「観測期間」「何をまとめたか」「収集をどこで止めたか」の3つだけです。
- 実測： 当社が計測している9サイトのうち、AI経由の流入が2件以上あった7サイト全部で、GA4の既定チャネルは参照元で数え直した値より小さく出ました。差は1.31倍から2.75倍です。
結論：AIクローラーの流入比は、窓と対象をそろえない限り比べられない
流入比は観測期間・クローラーの種類・サンプル・リファラーの4点をそろえて初めて比較できます。
1つでも違えば、同じプラットフォームの比率が桁で動きます。出どころの違う2つの数字を並べて「改善した」「悪化した」と読むことはできません。読めるのは、同じ窓・同じ対象で取り直した2点の差だけです。
受け取った数字を使うかどうかは、次の3つに即答できるかで決めます。観測期間はいつからいつまでか。何をひとまとめにしたのか。収集はどこで止めたのか。 この3つが出てこない数字は資料に載せません。
AIクローラー流入比（crawl-to-refer比）とは何か
あるAIのクローラーからのHTMLページ要求数を、そのAIを参照元とする要求数で割った比率です。
【公式仕様】Cloudflareがこの指標を公開したのは2025年7月1日です。日本語では「AIクローラーのアクセス比率」「クロール対送客比」とも呼ばれますが、指すものは同じです。出てきた数字が同じ定義かを毎回確かめます。
| 呼び方 | 使われる場面 | 指しているもの |
|---|---|---|
| crawl-to-refer ratio | Cloudflareの公式資料・英語圏の報道 | 同じ比率。正式名称にあたる |
| AIクローラー 流入比 | 日本語の解説・社内資料 | 同じ比率 |
| AIクローラー アクセス比率 | アクセス解析の文脈 | 同じ比率。「アクセス」がクロール側を指す |
| クロール対送客比 | パブリッシャー側の議論 | 同じ比率。送客の少なさを強調する言い方 |
計算式と「1リファラルに正規化」の意味
分子はクローラーからの要求数、分母はそのAIを参照元とする要求数で、答えは送客1回あたりの要求数です。
【公式仕様】Cloudflareの定義は、あるプラットフォームに関連するクローラー（ユーザーエージェント）からのHTMLページリクエスト総数を、そのプラットフォームに関連するホスト名をリファラーに持つHTMLページリクエスト総数で割る、というものです（Cloudflare「The crawl before the fall… of referrals」2025年7月1日）。
「50,000対1」は、この割り算の答えを右側が1になるようにそろえた表記です。50,000は倍率ではなく、送客1回あたりのクロール要求数を指します。分子も分母もページの実数ではなくHTTPの要求数で、同じ1ページを3回取れば3と数えます。
この比率が答えられること、答えられないこと
比率が示すのは送客の少なさだけで、取られたページが何に使われたかは示しません。
【公式仕様】Cloudflareは、AIクローラーのリクエストを目的別に分けた集計も出しています。同社のネットワークを通るAIクローラーのリクエストを母集団として、直近12か月では学習用が80%、検索用が18%、ユーザーの操作によるものが2%でした（Cloudflare「The crawl-to-click gap」2025年8月29日）。比率の分子には、この3つが混ざって入っています。
「比率が大きい＝学習に大量に使われている」とは言えません。分子の中身を分けずに足しているため、学習用が多いのかどうかは判定できません。
同じAnthropicの比率が7通り流通している
同じ会社の比率として、70,900対1から2,237対1まで、約13か月で7つの値が出回っています。
Search Engine Journalは2026年9月11日の記事で、引用されている値を7つ並べました。すべてCloudflareに帰属する数字で、同じ月に公表された2つのあいだにも約17倍の差があります（Search Engine Journal「Everyone Is Quoting The Same Number And Getting Different Answers」2026年9月11日）。
| 値 | 裏付けが取れている窓 | 出典の種類 |
|---|---|---|
| 70,900対1 | 2025年6月19日〜26日の1週間 | Cloudflare公式（一次） |
| 約50,000対1 | 2025年8月1日〜7日・全業種 | Cloudflare公式（一次） |
| 38,066対1 | 2025年7月の月次 | Cloudflare公式（一次） |
| 8,800対1 | 2025年8月1日〜7日・コンピュータと電子機器 | Cloudflare公式（一次） |
| 2,500対1 | 2025年8月1日〜7日・ニュースと出版 | Cloudflare公式（一次） |
| 23,951対1／11,122対1／10,300対1／4,580対1／2,237対1 | 当社では一次出典を特定できず | 報道・二次情報が「Cloudflare由来」として引用 |
表の最終行は当社が一次情報をたどれなかったものです。値そのものではなく、窓の違う数字が同時に流通している例として扱っています。
公表元の推移でも286,930から38,066まで動いている
外部の引用だけでなく、Cloudflare自身が出した月次の推移の中でも7倍以上動いています。
【公式仕様】同社の2025年8月29日の記事では、顧客の増減による偏りを除くために固定した顧客群を母集団として、2025年1月から7月にかけての変化を出しています。Anthropicが286,930から38,066へ86.7%減、OpenAIが1,217から1,091へ、Perplexityが54.6から194.8へ、Microsoftが38.5から40.7へ、Googleが3.8から5.4へ動いたと示されています。同じ指標名で、同じ会社の値が、半年で1桁動きます。
値が食い違う4つの分母
違いは嘘ではなく、観測期間・クローラーの種類・サンプル・リファラーという4つの分母の差です。
1つ目：観測期間が1週間から四半期まで混ざっている
期間が違えば同じ指標でも別の数字になるので、窓を書いていない値は比較の対象から外します。
【公式仕様】Cloudflareが最初にこの比率を出したとき、例示したのは2025年6月19日から26日までの1週間で、母集団は同社のネットワークを通るトラフィックです。同じ資料の中で、Googleに関する比率が週ごとに19.4%変動したことも示されています。
流通している値には1週間・1か月・直近28日・四半期が混ざっています。窓が書かれていない数字は比較から外します。
2つ目：学習用と検索用のクローラーを1つの社名にまとめている
各社は用途ごとに別々のクローラーを出していますが、比率はプラットフォーム名で合算されます。
【公式仕様】OpenAIとAnthropicは、用途の違うクローラーを別のユーザーエージェントとして公開しています。Googleにいたっては、学習用のGoogle-Extendedについて「検索での掲載にもランキングにも影響しない」と明記しています。
| 運営 | ユーザーエージェント | 公表されている用途 |
|---|---|---|
| OpenAI | GPTBot | 生成AIモデルの学習 |
| OpenAI | OAI-SearchBot | ChatGPTの検索結果への表示 |
| OpenAI | ChatGPT-User | 利用者が質問したときのアクセス |
| OpenAI | OAI-AdsBot | 広告のランディングページの検証 |
| Anthropic | ClaudeBot | 学習に寄与しうるコンテンツの収集 |
| Anthropic | Claude-SearchBot | 検索結果の品質向上 |
| Anthropic | Claude-User | 利用者が質問したときのアクセス |
| Google-Extended | Geminiの学習。検索の掲載とランキングには影響しない |
出典はOpenAI「Bots」、Anthropicのサポート記事、Google「Google crawlers」です（いずれも2026年9月12日取得）。用途の違うクローラーを1つの社名で足した数字は、送客を期待できる分と、そもそも送客を目的としない分を混ぜています。
まとめ方が変われば数字も変わります。Cloudflareは2026年7月1日の報告で、2026年6月時点の学習目的のクロールを52%とし、これとは別に「複数の用途をまたぐクローラー」が36%超を占めると書きました（Cloudflare「Content Independence Day, one year on」2026年7月1日）。先に挙げた80%とは、同じ会社の同じテーマの数字でありながら、区分の作り方が違います。
3つ目：同じ週でも業種を変えると20倍動く
サンプルに含める業種を変えるだけで、同じ期間・同じ会社の比率が20倍変わります。
【公式仕様】Cloudflareは2025年8月1日から7日までという同一の週について、同社のネットワークを通る顧客サイトを業種で切り分けた比率を公開しています。Anthropicは全業種で約50,000対1、ニュースと出版で2,500対1、コンピュータと電子機器で8,800対1でした。OpenAIは887対1、152対1、401.7対1、Perplexityは118対1、32.7対1、88対1です（Cloudflare「A deeper look at AI crawlers」2025年8月28日）。
自社の業種を見ずに全体値を持ってくると、桁を間違えます。
4つ目：アプリ経由の送客はリファラーを持たず、分母から落ちる
分母にあたる送客が数え落とされるぶん、公表されている比率は実際より大きく出ます。
【公式仕様】Cloudflare自身が最初の記事の中で、Claudeのネイティブアプリからのトラフィックはリファラーのヘッダーを含まず、他社のアプリも同様と推定されると書いています。そのうえで、ウェブ版のツールからのトラフィックだけを数えているため計算結果は比率を過大に示している可能性があり、その程度は不明である、としています。
落ちているのは分母の送客側なので、比率の値は本来より大きく出ます。
数字を受け取る前に聞く3つの質問
観測期間・まとめた単位・収集の境界、この3つに即答できない数字は使いません。
3つに答えられない数字をどう扱うか
答えが出てこない数字は、比較にも意思決定にも使わず、話題としてだけ扱います。
Search Engine Journalの記事は、この3つを聞くのに費用はかからないとしたうえで、答えが即座に出てこないなら、その数字を持っている側が意味を分かっていない、と書いています。
計測ツールを選ぶときの見分け方
窓とまとめ方と境界の3つを、聞かれる前に開示しているかどうかで見分けます。
同記事は、信頼できるベンダーは聞かれなくても窓・グループ化・境界を開示し、開示しないベンダーは定義されていない数字への信頼を求めている、としています。ツールのスコアそのものが当てにならない理由は「AI可視性とは？ツールのスコアが当てにならない理由」で、自社268本の実測とあわせて整理しています。
これは臨床検査の精度管理と同じ話
検査値は測定法と基準範囲をそろえないと比べられません。指標にも同じ条件が要ります。
【公式仕様】日本臨床衛生検査技師会は、日本臨床検査標準協議会と連携し、「いつ、どこの機関で臨床検査が実施されようとも、信頼性の高い検査結果が得られる」ことを目標に掲げて標準化事業を進めてきたと公表しています（日本臨床衛生検査技師会「臨床検査に係るJCCLS共用基準範囲の採用について」・2026年9月12日取得）。
先に標準化した分野が何をしたか
外部の精度管理調査と、現場ごとの内部精度管理を、60年かけて積み上げました。
【公式仕様】同会の外部精度管理調査は1965年に本格開始され、参加施設は4,200を超えています。その成果として国内の臨床検査データの施設間差が確実に小さくなったとされ、背景には各現場での日々の内部精度管理があると書かれています。共用基準範囲は2011年度に検討が始まり、2014年3月に公表されました。
検査値の世界は、測る道具と手順と基準をそろえるところから始めて、数字を比較可能にしました。AI検索の指標はまだその前段階にあります。指標を疑うことと、指標を捨てることは別です。 今できるのは、受け取るたびに窓と対象を確認することです。
同じことがGA4の中でも起きている
分母の置き方で答えが変わる現象は、外部の比率だけでなく自分のアクセス解析でも起きています。
GA4の既定チャネルは、実際のAI経由流入より小さく出る
【実測】GA4の既定チャネルの値は、参照元のホスト名で数え直した値より小さく出ました。
当社が計測している9サイトのうち、AI経由の流入が2件以上あった7サイトが全部そうでした（2026年8月・2026年9月12日取得）。差は1.31倍から2.75倍、中央値は1.56倍です。
【実測】そのうち最もAI経由の流入が多かったサイト（以下A社。社名と業種は伏せます）の2026年8月は、次のとおりです。
| 数え方 | ユーザー数 | 中身 |
|---|---|---|
| GA4の既定チャネル「AI Assistant」 | 1,758 | GA4が自動でAIアシスタントと判定したぶんだけ |
| 参照元のホスト名で数え直した値 | 3,418 | ChatGPT 1,460／Yahoo!検索のAIアシスタント 994／ChatGPTの広告経由 448／Copilot 304／Gemini 146／Perplexity 60／Claude 6 |
| 差の中身 | 1,660 | Yahoo!検索のAIアシスタント経由が自然検索へ、AI経由の広告クリックが有料検索へ振り分けられる |
【実測】同じ月・同じサイトなのに、「AI経由の流入」は1,758とも3,418とも書けます。分類の置き方2か所だけで約1.9倍です。 差が出る理由は、Yahoo!検索のAIアシスタント経由のリンクに utm_source=openai が付き、参照元は search.yahoo.co.jp のままであるため、GA4が内蔵のソースカテゴリでこれを検索として扱い、自然検索に落とすことにあります。当社はこの取り違えを2026年9月6日に確認し、AI流入の名前を参照元のホスト名で決める方式へ改めました。
なお、このA社ではAI経由のキーイベントが33件（ChatGPT 31件、Gemini 2件）発生しています。送客がゼロではありません。
Search Consoleでは生成AI経由を分けられない
【公式仕様】AIによる概要とAIモードに出たぶんは、Search Consoleの検索トラフィックへ合算されます。
Googleは、検索結果の他の部分と同じように扱うと明記しています（Google「AI features and your website」・最終更新2025年12月10日・2026年9月12日取得）。AIモード専用のレポートやフィルタは用意されていません。
Search Console側でも分母は混ざっています。切り出せない以上、増減の解釈は慎重にします。この点の実務は「サーチコンソールのAIモードは一律1位ではない」で扱っています。
中小企業が見るのは比率ではなく送客の絶対数
比率は自社では作れないので、AI経由で何人来て何件つながったかの実数で見ます。
【自社経験】当社が運用しているサイトでは、CDNやサーバーのアクセスログからクローラーのリクエスト数を数える仕組みを入れていません。したがって分子にあたる「AIクローラーからの要求数」が手元に無く、自社のcrawl-to-refer比を出すことはできません。
分子が取れない以上、追うべきはAI経由の流入数とキーイベント数です。施策ごとの効き方を見る手順は「LLMO対策に効果はある？効く施策・効かない施策と測り方」に、エンジンごとの違いは「AI検索エンジン比較2026」にまとめています。
それでも比率を使ってよい場面
同じ窓・同じ対象で自社の前月と比べるなら、比率は判断材料として使えます。
使ってよいのは、自分で取った数字を、自分で取った別の時点の数字と比べるときです。窓の長さ、含めるクローラー、リファラーの扱いを固定しておけば、増減の向きは読めます。公表値と自社の値を比べる、別の媒体の2つの値を並べる、業種の違うサンプルを自社に当てはめる。この3つはやりません。社外に出すときは、値と一緒に窓と対象を必ず書きます。書かなければ、その数字が8つ目になります。
まとめ
AIクローラーの流入比は、窓と対象を書いて初めて比較できる数字で、値だけでは比べられません。
同じAnthropicの比率として7つの値が流通しているのは、誰かが嘘をついたからではありません。観測期間が1週間から四半期まで混ざり、学習用と検索用のクローラーが1つの社名にまとめられ、サンプルの業種を変えるだけで20倍動き、アプリ経由の送客がリファラーを持たないまま分母から落ちているからです。4つともCloudflareの公開資料と各社のクローラー仕様で確かめられます。
受け取ったときにやることは3つです。観測期間を聞く。何をまとめたのかを聞く。収集をどこで止めたのかを聞く。答えが出てこないなら、その数字は資料に載せません。そして自社については、作れない比率を追うより、AI経由で何人来て何件つながったかを、参照元のホスト名で数え直すところから始めてください。クローラーの巡回そのものを止める判断をする場合は「AIクローラーの巡回拒否設定（robots.txt）と影響」を先に読んでください。止め方によって、この記事で扱った分子と分母の両方が変わります。
AIクローラーの流入比についてよくある質問
数字を実際に扱うときに詰まりやすい6つの点を、公式仕様と当社の実務の範囲で答えます。
Q. 比率が7万台から2千台まで下がったのは、AIが送客するようになったからですか？
A. その可能性はありますが、この数字だけでは判定できません。比率は送客が増えても、クロールが減っても同じ向きに下がります。観測期間やサンプルの業種が変わっただけでも下がります。判定したいなら、同じ窓・同じ業種・同じクローラーの範囲で取り直した2点を用意してください。比率の増減を「AIが親切になった」「搾取されている」と善悪で読むと、打ち手が決まりません。
Q. 自社のcrawl-to-refer比はどうやって出しますか？
A. 分子はサーバーかCDNのアクセスログからユーザーエージェント別のリクエスト数を数え、分母はGA4の参照元別のセッション数を使います。アクセスログを保持していない契約では分子が取れず、比率も作れません。当社もこの状態です。ログが取れないうちは、AI経由の流入数とキーイベント数を月次で並べてください。
Q. robots.txtで学習用のクローラーだけを止められますか？
A. 各社が用途ごとに別のユーザーエージェント名を公表しているので、原理としては分けて書けます。ただし止める範囲を誤ると検索側の掲載まで落ちるうえ、利用者の操作で動くクローラーはrobots.txtの扱いが異なる旨も公表されています。設定の可否と手順はこの記事の範囲外です。AIクローラーの巡回拒否設定（robots.txt）と影響を確認してから行ってください。
Q. llms.txtを置けば送客は増えますか？
A. Googleは、これらの機能に出るために新しい機械可読ファイルやAI向けのテキストファイル、マークアップを作る必要はないと明記し、追加すべき特別な構造化データも無いとしています。送客が増える根拠は公式には示されていません。置いたかどうかで比率が動くという前提では測らないでください。検証の考え方はllms.txt書いても意味ない？cats.txt実験でわかる効果の見分け方にあります。
Q. GA4の「AI Assistant」チャネルだけを見ていれば足りますか？
A. 足りません。当社が計測している7サイト全部で、このチャネルの値は参照元で数え直した値より小さく出ました。代表例がYahoo!検索のAIアシスタント経由です。リンクに付くパラメータがopenaiであるため、GA4がこれを検索として扱い自然検索へ振り分けます。AI経由の広告クリックも有料検索側に入ります。探索レポートで参照元のホスト名を軸に取り直してください。
Q. ニュースサイトの比率を、自社の目標値にしてよいですか？
A. 使えません。同じ2025年8月1日から7日の週で、Anthropicの比率は全業種で約50,000対1、ニュースと出版で2,500対1、コンピュータと電子機器で8,800対1と、業種で20倍開いています。自社の業種がこの3つのどれにも当てはまらない場合、参照できる公表値はありません。
参考情報
本文で【公式仕様】として断定した内容は、次の一次情報で裏を取っています。
- Cloudflare「The crawl before the fall… of referrals」（2025年7月1日）／「The crawl-to-click gap」（2025年8月29日）／「A deeper look at AI crawlers」（2025年8月28日）／「Content Independence Day, one year on」（2026年7月1日）
- Search Engine Journal「Everyone Is Quoting The Same Number And Getting Different Answers」（2026年9月11日）
- OpenAI「Bots」／Anthropic「Does Anthropic crawl data from the web?」／Google「Google crawlers」／Google「AI features and your website」（最終更新2025年12月10日）
- 日本臨床衛生検査技師会「臨床検査に係るJCCLS共用基準範囲の採用について」
- 当社が計測している9サイトのGA4実測（2026年8月・2026年9月12日取得）
