サイトのわずか8.9%しかAIクローラーをブロックしていないが、AIの回答で引用されることは一度もない
Only 8.9% of sites block AI crawlers, but 94.8% are never cited in AI answers (website-auditor.io)
要約
AIクローラーをブロックしているウェブサイトはわずか8.9%に過ぎませんが、AIが生成する回答で引用されることは94.8%のサイトで一度もありませんでした。これは、AIがウェブコンテンツをどのように利用し、引用しているかについての現状を示しています。
全文翻訳
AI Visibility Indexとは
AI Visibility Indexは、1,048のビジネスウェブサイトを対象とした継続的な調査で、以下の3つの要素を個別に測定します。ChatGPT、Claude、Gemini、Perplexityが、そのカテゴリと地域に関する購入意欲のある質問に対して、ビジネス名をどれくらいの頻度で挙げるか、回答時にどのウェブサイトを引用するか、そしてAIクローラーに対して自身のウェブサイトがどのようなAI対応シグナルを発信しているかです。
AIアシスタントは回答で中小企業名をどれくらいの頻度で挙げるか?
AI Visibility Indexで監査された1,009サイトのうち89.8%は、ChatGPT、Claude、Gemini、Perplexityが自身のカテゴリと地域に関する購入意欲のある質問に対して行った30,340件の回答で一度も名前が挙げられませんでした。AI Visibility Indexが2026年8月6日から2026年9月24日の期間で測定したところ、回答全体のうち言及されたのはわずか4.0%でした。
顧客がアシスタントに、ある地域でそのカテゴリの最良のプロバイダーを尋ね、アシスタントがいくつかの名前を挙げて回答する、というシナリオを想定しています。この調査項目では、監査対象のビジネスがその名前の中に含まれているかどうかが問われます。監査対象の各ビジネスは、ChatGPT、Claude、Gemini、Perplexityに対して個別に質問され、各回答は監査対象のビジネスと照合されます。
中小企業のウェブサイトはAIクローラーにとってどれくらい機械可読か?
AI Visibility Indexで監査された1,048サイト全体で、83.0%がrobots.txtを、76.3%がサイトマップを公開していますが、ホームページにschema.orgデータを掲載しているのは53.7%、LocalBusinessスキーマを掲載しているのは44.1%に過ぎません。robots.txtで少なくとも1つのAIクローラーをブロックしているサイトは、2026年7月9日から2026年9月24日の期間で測定したところ、9.4%でした。
この調査項目は、アシスタントのクローラーがサイトに到着した際に何を見つけるか、robots.txtがアクセスを許可しているか、サイトがサイトマップを公開しているか、ホームページがビジネスのアイデンティティと所在地を機械可読な形式で示しているか、といった点です。これらのシグナルのすべてはファーストパーティデータであり、当社のクローラーがサイトから直接読み取ったものです。
存在(Presence)は結果であり、可読性(Readability)はサイトオーナーが制御できる入力です。サイトは完璧にマークアップされていても名前が挙げられないことがあるため、両者は単一のスコアに統合されるのではなく並べて公開されています。これらのシグナルは、誰でも自分のサイトで実行できる無料スキャンと同じものです。
AI Visibility Indexの主な発見事項は?
AI Visibility Indexで監査されたビジネスの89.8%は、AIの回答で一度も名前が挙げられていませんでした。Geminiが最も頻繁にビジネス名を挙げ、その回答の4.4%を占めました。アシスタントがビジネス名を挙げ、情報源を示した場合、回答の72.9%はビジネス自身のサイトではなく、他のウェブサイトを引用していました。
-
89.8%
監査対象サイトの割合がAI回答に一切表示されない
30,340件のアシスタント回答(購入意欲に関する質問)のうち、1,009サイト中わずか103サイトしか一度も名前が挙げられませんでした。 -
72.9%
ビジネス名を挙げ、情報源を示した回答のうち、ビジネス自身のサイトではなく他のウェブサイトを引用した割合
アシスタントが監査対象ビジネスの名前を挙げ、情報源を示した場合、672件の回答のうち182件で他のウェブサイトが引用されていました。すべての回答で最も多く引用されたドメイン上位5つ(clutch.co、wikipedia.org、sec.gov、tripadvisor.com、reddit.com)は、9,052件の引用を集めました。監査対象ビジネス自身のサイトへの引用は274件でした。アシスタントがビジネスを推奨し、どこを参照したかを示す場合、参照されるのは通常他のウェブサイトです。 -
4.4%
Geminiはパネル内で最も広いリーチを持つ
Geminiは、2026年8月6日から2026年9月24日の期間、1,009サイトを対象とした調査で、回答の4.4%で監査対象ビジネスの名前を挙げ、他のすべてのアシスタントを上回りました。4つのアシスタントすべてに同じビジネスについて同じ質問が同じ日に尋ねられたため、この差は質問の違いではなく、アシスタント間の違いです。 -
9.4%
少なくとも1つのAIクローラーをrobots.txtでブロックしている
1,048サイト中98サイトがrobots.txtでAIユーザーエージェントを拒否しています。これらのリストには、検索クローラーよりも、モデルのトレーニングデータを収集するクローラーの名前がより多く含まれています。 -
82.7%
AIクローラーをブロックするサイトのうち、検索クローラーを一切ブロックしていない割合
AIクローラーをブロックする98サイトのうち81サイトは、トレーニングサイドのクローラーのみをブロックしています。これらのサイトは、このエディションで読み取られたOAI-SearchBotやPerplexityBotのような検索クローラーやユーザーエージェントをrobots.txtで一切拒否していません。そのうち57サイトはCloudflareの管理robots.txtが記載していたリストと全く同じリストを持っており、この分割の大部分は所有者の決定ではなくCloudflareのデフォルト設定によるものです。そのリストには、Geminiのトレーニングデータと、Geminiアプリでのグラウンディングを管理するGoogleトークンであるGoogle-Extendedも含まれています。 -
53.7%
schema.org構造化データを発行している
1,048サイト中563サイトがホームページに構造化データを掲載しています。残りは、アシスタントが読み取る prose(通常のテキスト)しかありません。 -
44.1%
LocalBusinessスキーマを発行している
ビジネス名、住所、カテゴリを機械可読な形式で示すマークアップは、ここで測定されたシグナルの中で最も採用率が低く、462サイトに存在します。このコーパスの大部分はローカルビジネスです。
どのAIアシスタントが中小企業に対して最も広いリーチを持つか?
AI Visibility Indexの2026年8月6日から2026年9月24日の期間、1,009サイトを対象とした調査において、Geminiは回答の4.4%で監査対象ビジネスの名前を挙げ、Perplexity(4.0%)、ChatGPT(3.8%)、Claude(3.6%)を上回りました。4つのアシスタントすべてに同じビジネスについて同じ質問が同じ日に尋ねられました。
回答で監査対象ビジネスの名前を挙げた割合 2026-08-06 ~ 2026-09-24 • 1,009サイト • 30,340回答
- Gemini 4.4% (1,009サイト中71サイト)
- Perplexity 4.0% (1,009サイト中58サイト)
- ChatGPT 3.8% (1,009サイト中64サイト)
- Claude 3.6% (1,009サイト中58サイト)
すべてのアシスタントに同じ質問が同じビジネスについて同じ日に尋ねられたため、以下の差はアシスタント間の違いです。Claudeは7,870クエリ中7,240件で可読な回答を返しましたが、これはパネル内で最も低い割合です。その他の回答は欠落としてカウントされるのではなく、分母から除外されています。
robots.txtでブロックされたAIクローラー 拒否しているサイトの割合 (1,048監査済みサイト)
Bytespider8.6% (90サイト) - トレーニングCCBot8.2% (86サイト) - トレーニングGPTBot7.5% (79サイト) - トレーニングGoogle-Extended7.3% (76サイト) - トレーニングClaudeBot7.2% (75サイト) - トレーニングanthropic-ai1.5% (16サイト) - トレーニングPerplexityBot1.3% (14サイト) - 検索OAI-SearchBot1.1% (12サイト) - 検索ChatGPT-User1.0% (10サイト) - 検索Perplexity-User0.8% (8サイト) - 検索
GPTBot、ClaudeBot、CCBotなどのトレーニングクローラーは、将来のモデルをトレーニングするために使用される可能性のあるページを収集し、そのモデルがビジネスについて知っていることを形成します。この影響はモデルリリースごとに到着し、リンクはありません。OAI-SearchBotやPerplexityBotなどの検索クローラーは、アシスタントがライブで回答する際に検索するインデックスを構築します。ChatGPT-UserやPerplexity-Userなどのユーザーエージェントは、アシスタントが回答を生成している間に個人の代わりにページを取得します。この調査のすべてのアシスタントはウェブ検索を利用して質問されたため、検索クローラーがサイトがこの調査で検索した回答に到達できるかどうかを決定します。Google-Extendedはクローラーではなく制御トークンです。GeminiのトレーニングとGeminiアプリでのグラウンディングの両方を制御するため、これをブロックするとサイトがGeminiのライブ回答から除外される可能性があります。ユーザーエージェントはrobots.txtに従わない場合があるため、それらに向けられたDisallow行は制御ではなく要求です。
監査済みサイトで見つかったAI対応シグナル 2026-07-09 ~ 2026-09-24 • 1,048サイト • ドメインごとの最新監査
- robots.txtを発行している 83.0% (1,048サイト中870サイト)
- sitemap.xmlを発行している 76.3% (1,048サイト中800サイト)
- robots.txtでサイトマップを指定している 69.8% (1,048サイト中731サイト)
- メタディスクリプションがある 75.2% (1,048サイト中788サイト)
- Open Graphタグがある 71.5% (1,048サイト中749サイト)
- schema.orgデータがある 53.7% (1,048サイト中563サイト)
- LocalBusinessスキーマがある 44.1% (1,048サイト中462サイト)
- 少なくとも1つのAIクローラーをブロックしている 9.4% (1,048サイト中98サイト)
AI Visibility Indexの背後にある方法論は?
AI Visibility Indexは、1,048ドメインにわたる2,234件の無料ウェブサイト監査を集計し、ドメインごとに最新の監査結果を使用しています。各ビジネスは、カテゴリと地域に関する質問でChatGPT、Claude、Gemini、Perplexityに対してクエリされ、各回答の引用元はビジネス自身のドメインと照合され、各サイトはWebsite Auditor独自のクローラーによってrobots.txt、サイトマップ、schema.orgシグナルについて読み取られます。
AI Visibility Indexデータのソースは?
AI Visibility Indexは、2026年4月3日から2026年9月24日の期間にWebsite Auditorの無料スキャナーで実行された、91の検出されたセクターにおける1,048の異なるドメインにわたる2,234件の保存済み監査に基づいています。各ドメインは最初に誰かが選択して監査を依頼し、運営者自身のプロパティの監査はすべての数値から除外されています。
後続の監査には、同じドメインのスケジュールされた再実行が含まれるため、サイトの最新の監査は現在の質問を反映しています。集計自体はSQL関数としてコミットされ、各エディションで再実行され、変更は変更ログに記録されるため、あるエディションは新しい判断ではなく、前回のものとの比較となります。
AI Visibility Indexは各パーセンテージをどのように計算するか?
AI Visibility Indexのすべてのパーセンテージは、ドメインごとに1つの監査を使用して、2つの整数カウントを割ることで計算されます。サイトは、少なくとも1つのアシスタントが少なくとも1つの回答でその名前を挙げた場合にカウントされます。拒否、読み取り不能な回答、プロバイダーの障害は、欠落としてカウントされるのではなく、分母に含まれます。そのため、1,047の監査済みサイトのうち1,009サイトがプレゼンス(存在)の数値に含まれます。
- 1ドメイン、1票。両方の調査項目でドメインごとの最新監査を使用します。監査をカウントすると、9回スキャンされたサイトが各シェアに対して9倍の影響力を持つことになります。
- 回答のプレゼンスは2026年8月6日から2026年9月24日を対象としています:1,009サイトと30,340件のアシスタント回答。サイトは、少なくとも1つのアシスタントからの少なくとも1つの回答で名前が挙げられた場合にカウントされます。その期間に監査された1,047サイトのうち、38サイトはビジネス名を挙げた回答を生成せず、分母から除外されています。
- 機械可読性は2026年7月9日から2026年9月24日まで、1,048サイトを対象としています。これはより長い期間とより大きなサンプルサイズであり、これらのシグナルは独自のクローラーによって読み取られ、サードパーティのプロバイダーに依存しないためです。
- 読み取り不能な回答は除外され、欠落とは見なされません。プロバイダーのタイムアウト、拒否、または解析器が読み取れなかったリストは、ビジネスに関する証拠ではなく、プロバイダーまたは解析器に関する事実です。可読な回答の割合が最も低いアシスタントが上記に名前が挙がっており、より小さな分母は推測ではなく、読者が確認できるものです。
- すべてのパーセンテージは派生値です。公開されているデータセットには整数カウントのみが含まれており、このページ上のすべてのシェアはレンダリング時にそれらのうちの2つから計算されます。したがって、見出しがデータから乖離することはありません。
AI Visibility Indexの限界は?
AI Visibility Indexのコーパスは自己選択であり、ランダムサンプルではありません。各サイトは無料監査を実行することを選択した所有者に属しており、これは中小企業に偏っています。プレゼンスは、名前のマッチングが曖昧であるため、過大評価されるよりも過小評価される可能性が高いです。また、これらの数値は2026年8月6日から2026年9月24日の期間のみを記述しています。
- コーパスは自己選択であり、ウェブのランダムサンプルではありません。含まれる各サイトは、その所有者が無料監査を実行することを選択したものであり、ウェブプレゼンスに積極的に取り組んでいる中小企業に偏っています。シェアは、すべてのウェブサイトではなく、その集団を記述するものとして扱ってください。
- クロスアシスタントパネルでは、2026年7月23日より前の監査は受け付けていません。なぜなら、以前の監査では単一のPerplexity回答がChatGPT、Claude、Geminiのカード全体に展開されていたからです。これらの以前の行は実際の回答ですが、すべてPerplexityのものであるため、それらを比較してアシスタントを比較することは、1つのプロバイダーをその出力と比較することになります。
- Claudeは、7,870件のパネルクエリ中7,240件で可読な回答を返しました。これはアシスタントの中で最も低い割合です。他の630件は拒否、解析器が読み取れなかったリスト、またはプロバイダーの障害(2件)であり、欠落としてカウントされるのではなく、分母から除外されています。
- 表示は、監査対象ビジネスをアシスタントの回答で言及されたビジネスと照合することによって測定されます。名前のマッチングは曖昧であり、ドメインのみで識別されたビジネス(約5件に1件)が最も難しいケースです。したがって、プレゼンスは過小評価される可能性の方が過大評価される可能性よりも高いです。
- アシスタントは非決定的であり、そのインデックスは常に変動しています。これらの数値は、指定された期間内に与えられた回答を記述しています。2026年9月24日以降に同じクエリを実行しても、異なる回答が得られます。
- クロールシグナルは、ホームページ、robots.txt、sitemap.xmlの3つの場所からのみ読み取られます。ホームページ以外のページに構造化データを持つサイトは、ここでは構造化データなしとしてカウントされます。
- クローラーブロックは、サイトのrobots.txtという1つのソースからのみ読み取られます。サイトはrobots.txtを開いたままにしていても、サーバーまたはCDNでAIクローラーを拒否し、ブラウザがページを取得できる一方で、そのクローラーにはエラーを返すことができます。したがって、ここでのブロックのシェアは、過小評価される可能性の方が過大評価される可能性よりも高いです。Claude-SearchBotとClaude-User(AnthropicがClaudeBotの横で実行する検索およびユーザーエージェント)は、このエディションの最後の監査後である2026年9月25日に監査に追加されたため、どちらもクローラーの数値には含まれていません。
- クローラーの数値は、2026年7月9日から2026年9月24日までの各サイトの最新監査から取得されるため、サイトのrobots.txtはその監査日に提供されたものです。2026年9月15日、Cloudflareは管理robots.txtを廃止しました。これは、各顧客のrobots.txtにGPTBot、ClaudeBot、Google-Extended、CCBot、BytespiderのDisallow行を書き込んでいました。ほとんどのGPTBotをブロックするサイトは、この5つのクローラーのリストを正確に含んでおり、このエディションのほとんどの期間はこの変更の前であるため、GPTBotとClaudeBotのカウントは、その日付より前のrobots.txtの状態を記述している可能性があります。2026年9月25日の再読み取りでは、そのリストを持っていたサイトの約半分がリストを削除していましたが、Cloudflareのエッジは依然としてGPTBotとClaudeBotを拒否し、ブラウザにサービスを提供していました。これはCloudflareサイトでは珍しいパターンです。したがって、トレーニングクローラーと検索エージェントの間のギャップの一部は、所有者の決定ではなくCloudflareのデフォルト設定によるものです。
- このエディションの構造化データ(structured data)の数値は、2026年8月5日のエディションと比較できません。2026年8月2日まで、検出器はJSON-LDブロックの最上位レベルのみを読み取っていたため、YoastやWordPressエコシステムの大部分がマークアップをラップするために使用する@graphコンテナを見逃していました。そのため、そのエディションでは構造化データとLocalBusinessスキーマの両方が過小評価されていました。このエディションの監査は修正された検出器によって読み取られるため、これらの2つのシグナルの変更の一部は測定の修正であり、サイトの変更ではありません。
- このエディションのプレゼンス(存在)率は、以前のエディションと比較できません。分母は現在、ビジネス名が読み取られる可能性のある回答をカウントするため、拒否または解析器が読み取れなかったリストは、プロバイダーの障害とともに残ります。以前のエディションでは、両方とも欠落としてカウントされていました。
- 引用(Citation)の数値は、情報源を示した回答のみをカウントします:ビジネス名を挙げた1,199件の回答のうち672件。サイトは、情報源のドメインが監査対象ドメインであるか、そのドメインの下にある場合に引用されたとカウントされ、そのビジネス自身の監査への回答のみです。Geminiは独自のリダイレクトを経由するため、Geminiの場合、引用されたドメインは各リンクの横に表示されるものです。ビジネス自身のウェブサイトを引用した回答のシェアは、Claudeの11.0%からGeminiの33.8%までアシスタントによって異なります。
引用と再利用
これらの数値は、帰属表示とこのページへのリンクがあれば自由に複製できます。基盤となる方法論、または特定のセクターのデータカットについては、support@website-auditor.ioまでご質問をお寄せください。
AI Visibility Indexの最新版は?
AI Visibility Indexの最新版は2026年9月25日付で、1,048ドメインと2,234件の監査をカバーしています。各エディションでは、このページの数値を更新し、新しいURLに移動する代わりに日付付きの変更ログ行を追加するため、引用は現在のデータに解決し続けます。
-
2026-09-25
第5版。第4版の4日後に公開され、新しい測定値を追加しました。Indexは現在、アシスタントが回答時にどのページを引用するかを記録しており、その発見がページをリードしています。また、クローラーのグループごとのサイト数もカウントするため、クローラーの発見は現在、AIクローラーをブロックするサイトのシェアとなっています。パネルは983サイトから1,009サイトに増加し、現在は2026年9月24日まで実行されています。クロールシグナルコーパスは1,012サイトから1,048サイトに増加しました。回答で名前が挙げられるサイトのシェアはわずかに増加し、AIクローラーをブロックするサイトのシェアはわずかに減少しました。Claude-SearchBotとClaude-Userは2026年9月25日にクローラーリストに追加されましたが、このエディションの監査には間に合いませんでした。 -
2026-09-21
第4版。監査済みサイト数が1,000を超えた最初の版です。パネルは339サイトから983サイトに増加し、現在は2026年9月21日まで実行されています。クロールシグナルコーパスは581サイトから1,012サイトに増加しました。このエディションでプレゼンスの分母が変更されました。現在、ビジネス名が読み取られる可能性のある回答をカウントするため、拒否や解析器が読み取れなかったリストは、プロバイダーの障害とともに残ります。プレゼンス率は以前のエディションと比較できません。構造化データ(structured data)の数値は、2026年8月2日に修正された検出器によって読み取られるようになったため、それも比較できません。AIクローラーをブロックするサイトのシェアは減少しました。Geminiは最も多くの表示回数を記録し、現在では個別のサイトによるリーチも最も広くなっています。 -
2026-08-05
第3版。第2版の5日後に公開されました。パネルは193サイトから339サイトに増加し、現在は2026年8月5日まで実行されています。クロールシグナルコーパスは436サイトから581サイトに増加しました。回答で名前が挙げられるサイトのシェアはわずかに減少しました。AIクローラーをブロックするサイトのシェアは増加しており、前回の版の報告とは逆の方向です。Geminiは引き続き最も多くの表示回数を記録しています。個別のサイトによるリーチは、現在Perplexityが最も広くなっています。この版からエディションIDには日付が含まれるようになります。なぜなら、1ヶ月に複数のエディションが出版される可能性があるからです。 -
2026-08-02
第2版。パネルは175サイトから193サイトに増加し、現在は2026年8月2日まで実行されています。クロールシグナルコーパスは418サイトから436サイトに増加しました。すべての見出しのシェアは1ポイント未満の移動でした。回答で名前が挙げられるサイトのシェアはわずかに減少し、AIクローラーをブロックするサイトのシェアもわずかに減少しました。Geminiは引き続きパネル内で最も広いリーチを維持しています。 -
2026-07-31
第1版。クロスアシスタントのプレゼンスは2026年7月23日から2026年7月31日まで測定されました。これは、ChatGPT、Claude、Gemini、Perplexityがそれぞれ独自のプロバイダーを通じてクエリされた最初の期間です。クロールシグナルは、2026年5月16日以降に監査された418サイトを対象に、ドメインごとに1回の監査で測定されました。
あなたのサイトはこのデータでどこに位置しますか?
Indexは、誰でも自分のサイトで実行できるのと同じ無料監査から構築されています。上記のAI対応シグナルをチェックし、あなたのビジネスについて4つのアシスタントすべてに名前でクエリします。サインアップは不要で、約1分で結果が得られます。