AI・機械学習
Show HN: Pac-Bench – モデルはPac-Manゲームをどれだけうまくワンショットできるか?
Show HN: Pac-Bench – How well can models one-shot a Pac-Man game? (jonclegg.github.io)
要約
このプロジェクトは、単一のプロンプトからPac-Manゲームを生成する能力をモデルごとにベンチマークする「Pac-Bench」です。各モデルは一度だけ(ワンショット)試行でき、追加のプロンプトや修正は許されません。結果はHTMLページとして生成され、モデルのワンショットでのゲーム生成能力を評価します。
全文翻訳
モデルが単一のプロンプトからPac-Manゲームを作成できるかをベンチマークします。
“Create a Pac-Man game in a single HTML page”
各モデルは一度だけ試行できます — フォローアップのプロンプトや修正はありません。