今日のPRスパムは2000年代初頭のEメールスパムに似ている
PR spam today looks like email spam in the early 2000s (greptile.com)
要約
本記事は、GitHubのリポジトリ「OpenClaw」におけるプルリクエスト(PR)の急増を分析し、AIエージェントが生成する低品質なPRが2000年代初頭のEメールスパムと類似していると指摘しています。PRの品質低下はオープンソースプロジェクトの多様性を損ない、今後は送信者のレピュテーションシステムや、コードベースの深い理解を要する貢献がより重要になると論じています。
全文翻訳
OpenClaw/openclaw に開かれたPRの統計的研究
私はGreptileでAIエージェントを使ってプルリクエスト(PR)をレビューしているRahulです。Greptileは、GitHub史上最も急成長したリポジトリとなったOpenClawのPRをレビューしています。その過程で、私たちは奇妙な現象を目撃しました。
昨年12月、OpenClawは週に2件のPRを受け取っていましたが、2月までにはその数は週3,400件に急増しました。スパイク前は約48%のPRがマージされていましたが、スパイク後は9.3%未満しかマージされていません。
そのPRの多くは、人々のAIコーディングエージェントによって生成された、労力の少ない低品質なものでした。例えば、あるコントリビューターは1日で106件のPRを提出し、提出間のメディアンタイムはわずか3秒でした。
多くの点で、openclaw/openclawはオープンソースへの貢献の将来がどのようになるかのプレビューを提供してくれます。ここでは3つの観察結果を挙げます。
PRには送信者の評判が必要になる
今日のPRスパムは、2000年代初頭のメールスパムのようです。
私がOpenClawのデータを初めて見たとき、そのパターンはメールを思い出させました。2000年、ILOVEYOUワームは24時間で4,500万台のコンピュータに感染しました。これは、メール送信コストがほぼゼロになり、人々がプラットフォームを信頼していたためです。その結果、人々ははるかに大量のメールを受け取るようになり、その中には悪意のあるものもありました。今日、PRにも同じようなパラメータが適用されています。
最初の対策は似ています。ボリュームを管理するためのブロックリスト、そして悪意のあるアクターを捕捉するための信頼度ベースのフィルターと評判インフラストラクチャです。今日、あなたのメールが受信者の受信トレイに届くかどうかは、あなたが誰であるか、そしてあなたの送信履歴の2つの要因にかかっています。
OpenClawのコントリビューターはすでに評判によってフィルタリングされています。初参加者は8.2%、2〜5件のPRを持つコントリビューターは10.3%、5件以上のコントリビューターは18.6%のマージ率です。
Mitchell Hashimotoは、最も人気のあるオープンソースターミナルエミュレータの1つであるGhosttyを作成・維持しています。プロジェクトが勢いを増すにつれて、AIによって生成された低品質なPRが大量に送信されるようになり、彼はAI生成の貢献を制限する必要がありました。
1週間後、彼はソリューションをリリースしました。Vouchは、オープンソースコントリビューターのための信頼管理システムです。未認証のユーザーは貢献できず、悪意のあるアクターは明確にフラグが立てられます。現時点ではVouchはプロジェクト固有ですが、Mitchellのビジョンは、信頼に関する決定が最終的に同様の価値観を共有するプロジェクト全体に波及することです。Vouchは、送信者の評判スコアのオープンソース版です。(注記:VouchはGhosttyでうまく機能していましたが、MitchellはGhosttyをGitHubから削除することを決定しました。)
より多くのコントリビューターも、全員が同じように考えていれば助けにならない
Linus Torvaldsには有名な言葉があります。「十分な目があれば、すべてのバグは浅い。」
同じ問題に多くの目があることで、多様な視点がもたらされます。異なる人々はソフトウェアを異なる方法で使用し、異なるバグに遭遇し、斬新な方法で修正に取り組みます。
しかし、全員がClaude / Codex / Cursor / Devinなどに集中した場合、そのルールは当てはまらないかもしれません。OpenClawでは:
- 4人のコントリビューターが、「feat(web-search): add SearXNG as a search provider.」という全く同じタイトルのPRを提出しました。彼らは、同じ機能を追加しようと独立して試みた10人以上のうちの4人でした。
- 6人がBrave Searchのロケールバグを独立に修正しました。2人は94分間隔で全く同じタイトルのPRを提出しました。
- 5人がエージェントランナーのタイムアウトデッドロックを独立に発見しました。
OpenClawにはこれまで以上に多くの目が向けられていますが、その視点もAIコーディングエージェントによってフィルタリングされています。ほとんどのコントリビューターが同じプロンプトで同じAIコーディングエージェントを使用する場合、彼らの貢献も同様に似通ったものになります。
オープンソースの約束と利点は、思考の多様性でした。Linusの法則は、基盤となる思考が多様であり続ける場合にのみ成り立ちます。コードベースを真剣に研究するコントリビューターは、そうしないコントリビューターとは異なるプロンプトを作成するでしょう。
実際にマージされているもの
OpenClawのPRデータでは、機能のマージ率は9%ですが、リファクタリングは35%です。
既存のコードベースに対する深い理解を必要とする貢献は、新しい機能の貢献よりも約4倍優れています。最近の一般的な格言として、タイピングよりも思考の方がはるかに重要です。データがそれを裏付けています。
例えば、claude-memがClaude Codeのフックでキャプチャしたツールストリームを、独自の再開可能なAgent SDKオブザーバーセッションにマッピングする方法は、両方のシステムに対する深い理解を必要とする、明白ではないアーキテクチャ上の選択です。この決定を理解したソフトウェア開発者は、それをチェックリストに落とし込むことができ、それがエージェントの出力を大幅に改善するプロンプトになります。「メモリシステムを構築する」とプロンプトされたエージェントは、それ自体ではそれを達成できません。
200年前まで、建物を設計する人々がそれを建設していました。彼らはマスタビルダーとして知られていました。建設が進むにつれて、その役割は建築と建設という2つの職種に分かれました。ソフトウェアとのアナロジーはクリーンではありません。建築家は依然として建物がどのように立つかを知る必要があります。しかし、それは現実の何かを示唆しています。レビューを通過する貢献は、エージェントが単独ではできないもの、新しい構築ではなく既存のシステムに対する深い理解を必要とする呼び出しであることが増えています。
では、次は何でしょうか?
OpenClawは数ヶ月で無から実用的なJarvisへと進化しました。一人の人間と強力なコミュニティが協力することで、1年前には不可能だったペースで構築することができました。それは非常に特別なことです。
オープンソースコミュニティは、これまで以上に速く構築できます。このスピードによって導入される問題には、ID、評判、貢献の検証方法におけるより良いプリミティブが必要となり、それらはすべて構築されるでしょう。オープンソースは以前にもっと難しい問題を解決してきました。