「AIはどれだけ巡回し、どれだけ人を連れてくるのか」　Cloudflareが可視化：数字で見るAIクローラーの影響

　従来の検索エンジンのクローラーは、Webサイトをクロールし、検索結果を通じてユーザーをWebサイトに誘導することで、Webサイト運営者にトラフィックと収益機会をもたらしていた。

　しかしCloudflareによると、AIクローラーは、クロールした情報をAIツールの中で提供するため、ユーザーが元サイトを訪れる必要がなくなる。Webサイト運営側から見ると、自社コンテンツの情報を大量にクロールされているのに、検索からの流入（リファラル）が極端に少ないという状態になっている。

　Cloudflareが新しい指標を導入したのは、こうしたAIクローラーの影響を定量化するためだ。

AIクローラーはどのくらいの影響がある？

　Cloudflare Radarの「AIのインサイト」ページでは、AIクローラーや検索エンジンごとに、クロール数とリファー数（Webサイトに実際に送信されるトラフィック）の比率を表している。データ例は以下の通り。

2025年6月のクロール数とリファー数の比率（提供：Cloudflare）

　例えば2025年6月のデータを見ると、GoogleのAIクローラーは「9.4対1」となっており、これは約10回のクロールごとに1件のトラフィックがあることを示している。OpenAIのAIクローラーは「1600対1」、AnthropicのAIクローラーは「70900対1」という割合になっている。

　単純計算では、GoogleのAIクローラーはクロールしたページの約10％にトラフィックを送信しているのに対し、OpenAIのAIクローラーはクロールしたページの約0.06％にしかトラフィックを返していない。AnthropicのAIクローラーはさらに低く、クロールしたページの約0.0014％にしかトラフィックを送信していないことになる。

　この指標（比率）は時間やクローラーごとに変動する。例えばある期間では、参照トラフィックはGoogleのAIクローラーによるものが圧倒的で、1日のうちでも比率が変化していたという。ただし、全体的に「クロールが多く、参照が少ない」という傾向はあった。

2025年6月1〜25日の参照トラフィック（提供：Cloudflare）

　Cloudflareは、AIクローラーは従来の検索エンジンよりも多くのコンテンツを取得する一方で、サイトへのトラフィック還元が少ないため、これまでのような収益モデルを維持するのが難しくなっていると指摘している。