HN 日本語サマリー

← 一覧へ戻る
AI・機械学習

Fableを攻略するための「ショートリーシュAIコーディングメソッド」

The Short Leash AI Coding Method for Beating Fable (blog.okturtles.org)

158 pointsby Riseed198 コメント

要約

この記事は、Greg Slepak氏が2026年7月2日に投稿したもので、AIコーディング手法である「ショートリーシュAIメソッド」について言及しています。このメソッドは、ゲーム「Fable」を攻略するために考案されたようです。

全文翻訳

Fableを凌駕するための「ショートリーシュAIコーディングメソッド」

この記事は、セキュリティクリティカルなシステムで高品質なソフトウェアをAIエージェントに書かせる方法について、1年以上にわたる研究の集大成です。

私は主に、ソフトウェア開発者、プロトコル開発者、そしてセキュリティクリティカルなソフトウェアのメンテナーとしての視点からこの記事を書いていきます。

この1年間、私はAIエージェントに深く没頭してきました。その限界、何ができて何に頼れないのかを探求してきました。私は、数十億ドル規模のAIレビューシステムと同等の性能を持つ、独自のAIレビューツールを作成しました。また、CrushというAIコーディングエージェントの、独自のカスタムフォークを維持してきました。そしてこの記事は、AIツールを使って高品質なソフトウェアを作成したい場合に、最良のアプローチだと私が学んだことの集約です。

AIを嫌う人もいます。確かに、多くの開発者はAIを嫌うべきです。なぜなら、それは彼ら自身のソフトウェア開発学習の敵となるからです。この記事は彼らのためのものではありません。この記事は、専門分野において、あらゆる「フロンティアAIモデル」を凌駕するスキルを持つ、少数のエキスパート開発者のためのものです。AIを、品質を一切犠牲にすることなく、パフォーマンスを向上させるための方法として使用したい、そんなエキスパート開発者のために、私はこの記事を書いています。

[画像: AIコーディングの概念図]

現在のアプローチにおける問題点

AIエージェントを多用したことがあるなら、セッション中に以下のようなことが起こりうることを知っているでしょう。

  • 最初は良いと思ったアイデアがそうではなく、より良いアイデアが存在することに気づく
  • エージェントが「暴走」し、意図しないことをし始める

何十万回も再生されているYouTube動画で、12個の並列エージェントをオーケストレーターで管理し、同時に膨大な数のタスクを実行する複雑なシステムを発明したと説明している人たちを見てきました。彼らはもはやコーディングプロセスに関与する必要がないと言います。それはただ、YouTubeの投稿者がビーチでくつろいだり、トイレに行ったり、無意味にコーヒーを飲んだりしながら、ゴミのようなコードを書き、ゴミのようなコードをレビューしているだけです。

このような「雰囲気(Vibe)」アプローチを使用すると、コードベースに対する自身の理解を構築することは人間には不可能です。AIは何度も暴走し、実際にソフトウェアを使おうとしたときに初めて、そのことに気づくでしょう。この方法は、品質を気にしない状況では完全に問題ないかもしれませんが、もしあなたが品質を気にするのであれば、異なるアプローチが必要です。

問題は、Fable 5によって書かれ、またはレビューされたコードでさえ、ひどいものになるということです。

[画像: Fable 5で生成されたコードの例]

コードは動作しますが、効率が悪く、醜悪です。そして、ニッチな分野で、モデルが参照できるトレーニングデータがあまりない場合、これは間違いなくより頻繁に起こります。特定のCEOがマーケティングで述べていることとは対照的に、これらのモデルはトレーニングデータを超えて思考することはできません。

AIコード生成 — 「ショートリーシュ」メソッド

そこで、「ショートリーシュメソッド」というAIコーディングエージェントの使用方法が登場します。

このメソッドは誰でも使えるわけではありません。プロのソフトウェア開発者だけが使用できます。しかし、素晴らしいのは、最先端のモデルを使用していなくても、Fableを凌駕する結果をもたらすことです。

ショートリーシュメソッドでは:

  • タスクを調査し、計画を立てるためのプランニングフェーズを使用します。進捗を追跡し、大きなタスクをステップに分解するために、私のタスクスキルのようなものを使用します(これは多くの「バイブエンジニアリング」メソッドとの共通点の一つですが、以下の箇条書きでアプローチが分岐します)。
  • 「YOLO」モード(別名「危険な権限スキップ」)は決して使用しません。
  • AIは「ゲームをしながら」作業しません。
  • 権限プロンプトを通じて、これから行われる変更の差分(diff)を表示するコーディングエージェントを使用します。
  • あなたは20世紀の狂人のように座り込み、AIが提案している変更を実際に分析します。
  • あなた自身を常にプロセスに留めておきます。YouTubeの投稿者が推奨するような、プロセスから自分を排除することはありません。
  • 権限プロンプトの差分を使用して、コードベースの理解を最新の状態に保ち、AIを「ショートリーシュ」で制御します。
  • AIが意図しないことをしようとしているのを見たら、いつでも権限を拒否します。
  • AIが「暴走」するのを防ぐために、必要に応じて頻繁に介入します。
  • 常に、AIは「ショートリーシュ」で制御されます。
  • AIが作業を台無しにして以前の作業を削除するのを防ぐために、各サブタスクの終わりにコミットを行います(これは起こり得ます。Opusがそれをしたのを見たことがあります)。
  • 最後に、レビューを行います。

AIレビューの方法

人間だけ、またはAIだけによるPR(プルリクエスト)には、人間とAIの両方によってレビューされたPRよりも多くの間違いが含まれます。

AIはリンター(linter)のように扱うことができます。一般的な間違いを素早く検出し、人間はより高レベルの問題や、必要とされる方向性の変更を検出します。

したがって、レビューに関しては:

  • すべてのPRに対してAIを使用すべきです。
  • AIは十分なコンテキスト(課題、PRの説明、コードベース、変更点)にアクセスできる必要があります。
  • レビューには、利用可能な最新かつ最高のモデルを使用すべきです。
  • PRの説明には、使用された正確なモデル(もしあれば)を「AI開示」という見出しの下に明記する必要があります。これは複数の目的を果たします。
    1. メンテナーにAIが使用されたことを知らせます。
    2. 弱いモデルが使用された場合、より良いモデルを提案できるようにします。
    3. あなたが「良い人間」の開発者であり、AIを「こっそり持ち込もう」としていないことを示します。
  • 最後に、そして最も重要なこととして、PRはAIが使用された場合、PRの「作成者」によってレビューされなければなりません。

最後の点は少し詳しく説明する価値があります。

AI支援PRは、実際には人間が支援したAIからのPRです。したがって、PRを提出する人間は、提出する内容を理解していることが期待されます。そして、AIが書いたコードをレビューしていなければ、それは理解できません。

そのため、自分自身のPRを、あたかも他人のPRをレビューしているかのように、一行一行レビューしなければなりません。完了したら、自身のPR承認を確認し、メンテナーに注意を求めることができます。これにより、コードベースに対する理解が構築され、実証されます。

終わりに

これが、okTurtlesでAIを使用する方法です。公式のAI利用ポリシーを読むことができます。

この記事がお役に立てば幸いです。

AI開示:この記事は、人間の脳に繋がった人間の指によって完全に書かれました。公開前に、最終的なAIスタイルの「スペルチェック」が実行されました。

寄付は愛です!
サポーターがいなければ、私たちは活動できません。
この機会に私たちの活動を支援してください。