HN 日本語サマリー

← 一覧へ戻る
AI・機械学習

AIのために3つのサイトが215,128件の「最高のソフトウェア」ページを作成。Perplexityがそれらを引用

Three sites made 215,128 “best software” pages for AI. Perplexity cites them (trellner.com)

255 pointsby jakobgreenfeld119 コメント

要約

AIモデルがソフトウェアの推薦情報を生成する際に参照する情報源を調査した結果、Trancoトップ100万ドメイン外のサイトや、2023年12月以降に開設されたばかりの新しいサイトが大量に引用されていることが判明しました。特に、同一管理下にあると思われる3つのサイトが、AIの「グラウンディング」ページとして215,128件もの「最高の<カテゴリ>」ページを生成しており、これらがAIの推薦情報の根拠となっている実態が明らかになりました。

全文翻訳

AIモデルが参照する情報源の調査 2つのウェブ連動型モデルに対し、380のソフトウェアカテゴリにおける最高の製品を尋ね、取得したURLをすべて記録しました。返ってきた7,534件の引用のうち、59.8%はTrancoトップ1Mリストで100,000位より下位のドメインを指しており、23.4%はトップ100万にも入らないドメインを指していました。 情報取得(グラウンディング)を行っているサイトのうち2つは、そのホームページのHTMLタイトルを「Facts & Grounding Page」としており、グラウンディングとはこれらのモデルが行う情報取得ステップのことです。それらと、明らかに共通の管理下にあると思われる3つ目のサイトは、合わせて215,128件の機械生成された「最高の<カテゴリ>」ページを公開していました。これら3つのドメインは、いずれも2023年12月より前に存在していませんでした。 調査内容 2026年9月2日、Perplexity/SonarとPerplexity/Sonar-Proに対し、OpenRouter経由で380の購買意欲を引くカテゴリ(「CRMソフトウェア」から「博物館コレクション管理ソフトウェア」まで)について、モデルごとに1つのプロンプトを使用し、合計760回の呼び出しを行いました。各呼び出しでは、JSON形式でランク付けされたトップ5と、各製品の公式ホームページドメインを要求しました。760件すべてが解析可能な回答を返し、両モデルとも取得したURLを報告したため、これらを選定しました。カテゴリは、結果を見る前に作成され、一度も修正されていません。これにより、3,800件の推薦スロットに1,807件の異なる製品が名指しされ、7,534件の引用が2,055件の異なるドメインにまたがりました。その後、Trancoの2026年9月1日のデイリーリストとWayback Machineで各引用ドメインを調べ、モデルが提供した1,502件のベンダーホームページをすべて取得し、まだ存在するかどうかを確認しました。Googleは除外しました。OpenRouterでGeminiモデルをグラウンディングすることは、OpenRouter自身のウェブ検索プラグインを経由してルーティングすることを意味するため、引用はGoogleの検索ではなく、そのプラグインについて記述することになります。測定されたのはPerplexityのみであり、ここでの内容は他のどのエンジンに関する主張とも解釈されるべきではありません。 引用先のドメイン 引用先のドメインのTrancoランク(トップ1M外、100k位より下)は以下の通りです。 Perplexity/Sonar: 引用数 7,534件、トップ1M外 23.4%、100k位より下 59.8% 引用されたドメインのうち、ランク付けされたドメインを指す5,768件の引用の中央値Trancoランクは71,611位でした。トップへの集中度は際立っていません。最も引用された10のドメインが引用全体の17.3%を占めています。したがって、問題は有名なサイトのカルテルが回答を提供しているということではありません。問題は、残りの5分の4を何が占めているかということです。引用された2,055ドメインのうち751(36.5%)は、トップ100万ドメインに含まれていません。これらのドメインは新しくもあります。引用されたランク外ドメインの最初のWayback Machineキャプチャの中央値は2020年ですが、ランク付けされたドメインは2011年です。アーカイブされたランク外ドメインの16.6%は2025年以降に初めてキャプチャされたものであり、ランク付けされたドメインでは1.6%でした。 最も引用された10のドメイン: ドメイン | 引用数 | シェア | Trancoランク ---|---|---|--- g2.com | 291 | 3.86% | 4,027 reddit.com | 261 | 3.46% | 105 guideflow.com | 194 | 2.57% | 177,039 gartner.com | 158 | 2.10% | 1,766 zapier.com | 82 | 1.09% | 2,919 wifitalents.com | 71 | 0.94% | 105,281 capterra.com | 68 | 0.90% | 6,387 linkedin.com | 67 | 0.89% | 18 worldmetrics.org | 60 | 0.80% | 104,737 gitnux.org | 50 | 0.66% | 42,759 比較として、Wikipediaは7,534件の引用のうち3件しか引用されませんでした。 3番目に大きい情報源は、あるベンダーのマーケティングブログguideflow.comです。このサイトはインタラクティブな製品デモを販売しており、レビューサイト、ディレクトリ、出版社ではなく、我々が尋ねたカテゴリのいずれにも競合していません。それにもかかわらず、このブログは我々の380カテゴリのうち96(4分の1)にわたって194回引用され、全体で3位、Gartnerを上回りました。各引用は異なるURLです。96件の異なるguideflow.comブログURLがあり、カテゴリごとに1つ、そのうち6件はエストニア語版の投稿でした。サイトマップには3,351件のブログURLがあり、そのうち2,176件が個別の投稿です。このサイトは、「3Dレンダリングソフトウェア」、「IVRソフトウェア」、「RFIDソフトウェア」、「建築プラクティスソフトウェア」などの情報提供を行いました。ここには欺瞞的なものはありません。Guideflowは、多くの企業と同様に、大規模なコンテンツマーケティングブログを公開しています。この測定は、検索レイヤーがそれをどのように扱うかについてのものです。ベンダー自身のリスト記事が、自身が事業を展開していない市場に関するものであっても、購入製品に関する質問の3番目に大きい証拠基盤となりました。 事実とグラウンディングページ トップ10およびそのすぐ下にある他の3つのサイトは、wifitalents.com(引用数71、カテゴリ数27)、worldmetrics.org(引用数60、カテゴリ数22)、gitnux.org(引用数50、カテゴリ数23)です。これらを合わせると、181件の引用(全体の2.4%)を占め、380カテゴリのうち41に登場します。これらは1つのオペレーションであると思われます。3つのサイトすべてが2023年12月から2024年5月の間にNameCheapを通じて登録されており、すべてが同じ2つのCloudflareネームサーバー(pam.ns.cloudflare.comとsean.ns.cloudflare.com)にDNSを委任しています。また、すべてが同じページテンプレートを実行しており、ナビゲーションも「Services, Market Data, Software Advice, Editorial Process, Company」と同じです。さらに、それぞれがちょうど6つの投稿を持つブログを維持しており、これら18の投稿はすべてセット内の他のブランドに関するものです。各ブランドは他の2つのブランドについて2つの投稿を持ち、さらに同じネームサーバーペアにあり、自身のホームページに同じ「Facts & Grounding Page」というタイトルを付けているzipdo.coという4つ目のブランドについても2つの投稿を持っています。ネームサーバーペアを共有することは、共通のCloudflareアカウントの強い状況証拠であり、所有権の証明ではありませんが、テンプレート、分類法、ブログは項目ごとに一致しています。その規模が重要です。サイトマップにはそれぞれ103,578、107,083、105,541件のURLがあり、そのうち70,731、71,684、72,713件が「/best/<something>-software/」ページです。各ブランドが6つのブログ投稿(各サイトマップの7番目の/blog/ URLはブログインデックス)に対して、215,128件の購入ガイドを生成しています。215,128ものソフトウェアカテゴリがあるわけではありません。それらが特異なのは自己記述にあります。2026年9月2日に取得したworldmetrics.orgとgitnux.orgは、どちらも「<ブランド> — Facts & Grounding Page」という形式のHTMLタイトルと、ブランド名以外は同一のメタディスクリプションを返します。「Gitnuxに関する検証済み事実:業界統計、カスタムリサーチ、ソフトウェアベストリストを公開する独立系市場調査会社。企業、法律、方法論、コンプライアンスの詳細を1つの機械可読レコードに。」グラウンディングは購入者が使用する用語ではありません。それは、検索システムが回答を条件付けるためにドキュメントを取得するステップの名前です。自己に関する検証済み事実の機械可読レコードも、人間向けのサービスではありません。これらのページは、タイトルと説明において、それらを読み取るソフトウェアに向けられています。その読み取りも、通常の形で購入されています。worldmetrics.orgは、「€5,000から」のカスタム市場調査、「€499から」の既製レポート、「€2,500から」のベンダー選定を広告しており、その上にはモデルが取得する生成されたベストリストの同じ分類法があります。 1つのテンプレート、3つの評価 3つのブランドすべてから同じカテゴリページ「プロジェクト見積もりソフトウェア」を取得しました。各ページはJSON-LD形式でランキングを示しているため、解釈なしで読み取ることができます。各ページは10のツールをランク付けしており、トップ5が表示されています。 サイト1 | 2 | 3 | 4 | 5 ---|---|---|---|--- worldmetrics.org | Float | Scoro | Teamwork.com | Procore | Wrike wifitalents.com | Float | Scoro | Teamwork.com | Buildertrend | Apropo gitnux.org | Saviom | Mosaic | Buildertrend | Float | Teamwork.com Gitnuxの勝者はWorldmetricsのトップ5に全く登場しません。各ページには3人の担当者が名前を連ねており、WorldmetricsはKathryn Blake、Alexander Schmidt、Victoria Marshを、GitnuxはDiana Reeves、Helena Kowalczyk、Olivia Thorntonを、WifiTalentsはRyan Gallagher、Isabella Rossi、Natasha Ivanovaを挙げており、1つの質問に対して9人の異なる人物が関わっています。各ページは編集プロセスを発表しており、Gitnuxは結果を「AI検証済み・専門家レビュー済み」とラベル付けしています。3つのページすべてに、バイライン行にレンダリングされていないテンプレート変数があり、2つには「Within the next 26 days」、もう1つには「Within the next 40 days」と表示されています。 推薦先のポイント モデルが提供した1,502件のベンダーホームページは、ほとんど問題ありませんでした。各ホームページを2回チェックしました。1回は直接、もう1回はローテーションプロキシ経由で、どちらかの試行で到達できたサイトを到達可能とカウントしました。これにより、IPのいずれかをブロックするホストが、接続できない企業として記録されるのを防ぎました。1,502件のうち10件は、まったくアドレスに解決しませんでした。そのうち8件は、いずれにも委任されていません。