Redditにはアストロターフィングの問題があるのか？ データが示唆すること

あるシェフナイフブランドは、「何を買うべきか」という言及の31%がアカウントの5%から来ており、偶然予測される量の4倍に達しています。そこで、それらアカウントのRedditでの全履歴を収集しました。 私は料理が好きで、料理は高級な日本のシェフナイフへの執着へと変わりました。ナイフやその他のものを買いたいとき、私は製品名をGoogleに入力し、「reddit」という単語を追加します。多くの人がそうしています。Mike Riggsは2022年にReason誌でこれを「Redditハック」と書き、Dmitri Breretonのエッセイ「Google検索」が同じ点を指摘しました。末尾に「reddit」を付けたクエリは、アフィリエイトページではなく人間を返します。この習慣の裏にある賭けは、r/chefknivesの誰かがあなたにナイフについて嘘をつく理由がないということです。 その賭けには明白な弱点があります。もしRedditが購入者が無料の意見を求める場所なら、Redditはブランドが有料の意見を植え付けたい場所になるでしょう。私が読んでいるナイフのサブレディット、そして「New Knife Day」のためにスクレイピングしているサブレディットに、その兆候がないか調べたいと思いました。それは、一つの疑わしいコメントに関する勘ではなく、数えて他の人が再現できるようなものでなければなりません。 なぜこの問題はテスト可能なのか 昨年、私は小さな名前付きエンティティモデルであるGLiNERをファインチューニングして、ナイフのコメントからブランド、モデル、鋼材を抽出できるようにしました。「white #2のMazakiを手に入れた、古いFibroxよりずっと良い」といったコメントから、Mazakiをブランド、Fibroxをモデル、white #2を鋼材として抽出します。そのモデルは、New Knife Dayのスクレイパーが収集する6つのサブレディット（r/knives, r/knifeclub, r/chefknives, r/japaneseknives, r/FixedBladeEdc, r/KnifeSteels）のすべてのコメントに対して実行されます。そのモデルに関する記事はこちらです。 したがって、私がすでに持っている各コメントについて、誰がそれを書いたか、どのブランドに言及しているか、そしてそのスレッドが誰かが購入するものについて尋ねているかどうかを把握できます。それは、狭い質問をするのに十分です：購入を変える推薦が行われるスレッドで、誰が推薦を行っているのか？ New Knife Dayはナイフコレクターのための私のサイトです。ナイフと鋼材をカタログ化し、Redditのユーザーがどのナイフを購入し、議論しているかを追跡しています。そのため、ナイフRedditを読む価値があることには利害関係があります。New Knife Dayはnew.knife.dayにあります。 アストロターフィングがデータでどのように見えるか 誰も自分のシャillアカウントを公開しないので、有料投稿が何を残すかを事前に決定する必要がありました。その市場は隠されていません。REDCmtsはRedditのコメント1件を9.99ドル、100件を699.99ドルで販売しており、「本物の、古いアカウント」と称し、配信したと主張するブランド言及のギャラリーを示しています。Soarは、そのアカウントは単一のブランド言及の前に数週間「古く、手動でウォームアップされている」と述べています。Bazzlyは、誰かが買い物をしているように見えるすべての投稿に自動返信することを宣伝しています。 REDCmtsの価格表、2026年9月。これはサービスが存在し、そのコストを示しています。この記事のいかなる部分も、いかなるベンダーも、ナイフのサブレディットのいかなるアカウントとも関連付けていません。 Soarは、購入者が支払っているアカウントの準備について説明しています。上記の注意書きと同じです。 それらの販売ページを製品の説明として捉えると、準備された少数のアカウントを通じて配信される、1つのブランドの有料キャンペーンは以下のように現れるはずです： 「何を買うべきか」スレッドでのブランド言及の不均衡な割合を書くアカウントの小さなグループ。 それらのアカウントが、他のブランドに言及するたびに、ほぼ常に1つのブランドに言及すること。 薄いアカウント：コメントが少なく、スコアが低く、サブレディットでの実質的な立ち位置がない。 若いアカウント、または履歴が隠されているか消去されているアカウント。 ナイフのコメントが支払われているものであるため、主にナイフのサブレディットに投稿するアカウント。 ストアやアフィリエイトページへのリンク。 これらすべては、熱心なファン、自分の時間で投稿するメーカーの従業員、または購入スレッドに迷い込んだブランド自身のレギュラーが生成するものとも同じです。公開されているRedditデータは、推薦が集中していることを示すことはできますが、その理由を示すことはできません。以下のすべては、最初の半分に関するものです。 コーパスと、答えを変えたリフレッシュ スクレイパーは、投稿直後に各新しい投稿とそのコメントを保存します。この質問にとっては間違ったタイミングでした。購入スレッドは、その後の1〜2日間で推薦を収集し、r/knivesの投稿は平均1.5件の保存されたコメントしかありませんでした。リフレッシュパスは、48時間以上前の3,607件の投稿に戻り、コメントツリーを再取得しました。これにより、コーパスは21,673件のコメントから51,129件に増加しました。リフレッシュ前は、下のテストでは何も見つかりませんでした。なぜなら、約800件の購入スレッド言及は、7.1%の偶然が与えるものから7.6%を区別するには少なすぎたからです。 カウント 投稿数 6,675 リフレッシュ後のコメント数 51,129 10件以上のコメントを持つ著者 987 購入スレッドでのブランド言及（それらの著者から） 1,471 3つの定義が機能します。「何を買うべきか」スレッドは、タイトルまたは本文が「買うべきか」「推薦」「〜ドル以下」「最高のナイフ」などのフレーズに一致する投稿です。これは分類子ではなく正規表現です。著者のブランドへの傾倒度は、同じブランドに毎回言及することに重点を置いて、ブランドに言及するコメントの割合です。10件以上のコメントを持つ987人の著者のうち、スコアが最も高い5%は49アカウントであり、この記事の残りの部分ではこれらをブランドロイヤルアカウントと呼びます。私はこのようにスコアリングします。なぜなら、同じブランドを繰り返し持ち出すアカウントは、上記のベンダーが販売している製品だからです。 質問は、偶然によって49のブランドロイヤルアカウントが、皆がどれだけ投稿するかを考えると、購入スレッドでの言及の何パーセントを書くかということです。その数を得るために、私は各ブランド言及をそのまま保持し、そのスレッド内で、そのブランドに言及している状態で、著者の名前をランダムに再割り当てします。これは、名前タグをシャッフルするようなものです。多作なアカウントは多くの言及を得て、静かなアカウントはわずかな言及を得ますが、どのアカウントがどのアカウントに現れるかはもはや誰であるかに依存しません。私はこれを1,000回行い、各回の49アカウントのシェアを記録します。実際のシェアが、それら1,000回の再割り当てが生成する範囲内に収まる場合、それらはコメント数で説明されるよりも購入スレッドで集中しているわけではありません。それが範囲を上回る場合、それらは投稿量で説明されるよりも頻繁に購入スレッドに現れます。著者はデータベース全体でソルトハッシュ化されています。ユーザー名やコメントテキストはデータベースから出力されません。 データが支持するもの ここに1つの例でのテストがあります。購入スレッドでの1,471件のブランド言及を取り、著者名をランダムに再配布します。これにより、忙しいアカウントは多くの言及を得て、静かなアカウントはわずかな言及を得ます。これを1,000回行います。平均して、49のブランドロイヤルアカウントは言及の7.9%を獲得し、100回の取引のうち95回ではそのシェアは6.3%から10.1%の間に収まります。 それらの実際のシェアは11.3%です。1,000回の取引のうち2回しかそれに達しませんでした。カウントで言うと、約13回に1回がこれらの49アカウントから来ていますが、偶然では13回に1回です。これは1,471件の言及のうち約50件の追加の推薦です。ブランド重視の5%からはどれだけの購入アドバイスが来ていますか？ブランド重視の5%からはどれだけの購入アドバイスが来ていますか？「何を買うべきか」スレッドでのブランド言及のシェア、49のブランドロイヤルアカウントが書いたもの 0% 5% 10% 15% 20% 25% 30% 35% 全ての6つのサブ 11.3% n=1471 r/knives 6.7% n=496 r/chefknives 14.9% n=475 r/knifeclub 12.4% n=274 r/japaneseknives 15.2% n=132 r/FixedBladeEdc 8.5% n=94 ブランドB001 20.4% n=147 ブランドB004 26.1% n=115 ブランドB003 31.2% n=77 ブランドB002 8.1% n=74 偶然によって期待されるもの：平均から95パーセンタイルまで観測されたもの、95パーセンタイルの上 n = 10件以上のコメントを持つ著者による購入スレッドでのブランド言及数。ブランドはコード化されています。1,000回のランダムな著者再割り当てからの偶然。追加のシェアがどこに着地するかが、そのサイズよりも重要です。もしナイフReddit全体がゲームされているなら、すべてのサブレディットが偶然を上回るはずです。2つがそうであり、r/chefknivesとr/knifeclubです。r/knivesは最大ですが、偶然から0.5ポイント以内です。有料キャンペーンは1つのブランドによって購入されるため、ブランドごとにも現れるはずであり、実際に現れています。3つのブランドは、偶然が与える量よりも、ブランドロイヤルアカウントからの購入アドバイスをはるかに多く受けており、1つの大きなブランドはわずかに少なく、3つはゼロです。これは、少数のターゲットキャンペーンが残すであろう形状であり、少数の活発なファンベースが残すであろう形状でもあります。 購入スレッドでのブランド言及 49のブランドロイヤルアカウントからのシェア 偶然によるシェア r/chefknives 14.9% 7.7% r/knifeclub 12.4% 7.3% r/k