HN 日本語サマリー

← 一覧へ戻る
AI・機械学習

Claude Haiku 5.5 の紹介

Claude Haiku 5.5 (anthropic.com)

1003 pointsby sfkgtbor471 コメント

要約

Anthropicは、最も安価で高速、かつ高性能な小型モデルであるClaude Haiku 5.5を発表しました。このモデルは、要約、データコンパクション、データベースクエリ、分類などの高ボリュームでコスト重視のタスクに最適化されており、以前のバージョンと比較して大幅な価格低下とパフォーマンス向上が実現されています。また、Claude Sonnet 5.5のキャッシュ読み取り価格も引き下げられ、APIクレジットの提供も拡充されています。

全文翻訳

Claude Haiku 5.5

Claude Haiku 5.5を発表します。これは、当社がこれまでにリリースした中で最も安価で、最も高速で、最も高機能な小型モデルです。

Claude Haiku 5.5は、高ボリュームでコストに敏感なタスク向けに設計されています。要約、コンパクション、データベースクエリ、分類リクエストなどの迅速かつ反復的なワークロードを reliably に処理します。また、Opus 5.5およびSonnet 5.5と組み合わせて、コーディング作業のサブエージェントとしても機能します。さらに、当社史上最速のモデルであるため、ライブカスタマーサポートやブラウザ利用などの速度が重要なタスクにも特に適しています¹。

Haiku 5.5は、Haiku 4.5よりもはるかに低い価格で利用可能です。平均して、実行コストは約75%削減されました²。

このリリースと同時に、モデルレンジの価値向上にも取り組んでいます。Claude Sonnet 5.5のキャッシュ読み取り価格を半額にし、これによりSonnet 5.5はほとんどのエージェントワークで約20%安価に実行できるようになりました。さらに、Claude MaxおよびTeamサブスクライバー向けに新しい月間APIクレジットを導入し、Claude Platform上で実行される新しいエージェントやアプリケーションの構築をサポートします。

パフォーマンス

Claude Haiku 5.5がさまざまなベンチマークでどのようにパフォーマンスを発揮するかを示します。

Haiku 5.5
Haiku 4.5
GPT-6 Luna
Sonnet 5.5 (参考)

ナレッジワーク
GDPval-AA v2.1

1620

735

1437

1840

ナレッジワーク
AA-Briefcase v1.1

1578

614

1336

1824

コンピューター利用
OSWorld 2.1

72.4%

オフラインサブセット

15.7%

オフラインサブセット

48.9%

オフラインサブセット

83.9%

オフラインサブセット

学際的推論
Humanity’s Last Exam

45.9%

ツールなし

10.2%

ツールなし

—

56.9%

ツールなし

57.4%

ツールあり

18.7%

ツールあり

—

64.5%

ツールあり

エージェントコーディング
Terminal-Bench 4.0

39.2%

0.0%

16.4%

70.6%

エージェントコーディング
FrontierCode 1.1 (Main)

46.4%

—

42.4%

52.1%
Xhigh

ビジュアル推論
Chartography

46.4%

ツールなし

6.4%

ツールなし

29.1%

ツールなし

61.6%

ツールなし

評価の実行方法の詳細については、Haiku 5.5 システムカードをご覧ください。

Haiku 5.5は、調整可能なエフォート設定を備えた初のHaikuクラスのモデルです。これは、他のモデルと同様に、ユーザーがコストまたはインテリジェンスのどちらを最適化するかを決定できることを意味します。以下のチャートは、各エフォート設定での3つのベンチマークにおけるHaiku 5.5のパフォーマンスを示しています。

OSWorld 2.1 (オフラインサブセット)
精度 vs. コスト

0
10
20
30
40
50
60
70
80
90
部分点スコア (%)

0.05
0.10
0.20
0.50
1
25
試行あたりのコスト (USD、対数スケール)

OSWorld 2.1は、エージェントが実際のコンピューターを操作して、長くて複数ステップのタスクを完了できるかどうかを測定します。

初期テストでは、お客様から上記のパフォーマンスとコストの改善に一致する結果が報告されています。新モデルについてお客様から寄せられた声は以下の通りです。

引用

「Claude Haiku 5.5には非常に感銘を受けており、特にその速度には驚いています。AI Teammates、当社のAIエージェント製品の評価スイートで実行したところ、バグのトリアージ、プロジェクトのセットアップ、大規模なポートフォリオの検索による高リスクまたは遅延している作業の特定といったユースケースをカバーしました。現在使用しているモデルと比較して、タスク完了のレイテンシが30%以上削減され、エージェントのターンあたりの推論速度が最大2.5倍向上しました。明らかに、より機敏な体験です。」

会社
Asana

著者
Aaron Vinh, Staff Software Engineer

価格

以下の表は、Claude Haiku 5.5の価格が他のモデルと比較してどのようになっているかを示しています。Haiku 5.5は、プロンプトが最大10万トークンであるタスクに使用する場合に特に価値が高く、これは以前のHaikuモデルへのリクエストの約90%を占めます。

安全性

アライメント。 Claude Haiku 5.5は、Haiku 4.5と比較して、ほとんどすべてのアライメント評価で大幅な改善を示しています。特に、不適切な動作のインスタンスがはるかに少なくなり、不正利用への協力意欲も低下しました。モデルのシステムカードでは、評価プロセスと結果をより詳細に説明しています。

セーフガード。 その能力と一致して、Haiku 5.5のサイバーセキュリティセーフガードはHaiku 4.5よりも厳格ですが、他の最近のモデルに適用したものよりはやや緩やかです。サイバーセキュリティにおいては、Sonnet 5.5のセーフガードよりも広範な防御タスクを許可しますが、攻撃者によって使用される可能性が高いペネトレーションテストやその他の技術は引き続きブロックします。

Haiku 5.5の生物学セーフガードは、Sonnet 5、Sonnet 5.5、およびOpus 5と同じです。研究目的の生物学に関する質問は許可しますが、危害を引き起こす可能性が高いと判断されるリクエストへのアクセスは制限します。より広範な生物学およびサイバー活動に取り組んでいる組織は、ライフサイエンス検証プログラムおよびサイバー検証プログラムに申請できます。

利用可能性

Claude Haiku 5.5は、Amazon Web Services、Google Cloud、Microsoft Azureを含むすべてのプラットフォームで利用可能です。Claude Platformでは、開発者はclaude-haiku-5-5から開始できます。

詳細については、移行ガイドをご覧ください。

その他のアップデート

Claude Haiku 5.5の新しい価格設定と並行して、モデルと製品の価値をさらに向上させています。

まず、本日より、Claude Sonnet 5.5のキャッシュ読み取り価格を引き下げます。キャッシュ読み取りの価格は50%安くなり、100万トークンあたり0.10ドルから0.20ドルになります。キャッシュ読み取りはモデルのトークン消費のかなりの部分を占めるため、これによりほとんどのエージェントタスクでのSonnet 5.5のコストが約20%削減されます。

例えば、この価格引き下げがTerminal-Bench 4.0におけるSonnet 5.5のコストに対するパフォーマンスにどのような影響を与えるかを示します。

Terminal-Bench 4.0
精度 vs. コスト

0
10
20
30
40
50
60
70
スコア (pass@1, %)

0.50
1
2
5
10
コストあたりの試行 (USD、対数スケール)

Terminal-Bench 4.0は、モデルがコマンドラインインターフェース内で複雑で複数ステップのプロフェッショナルタスクをどの程度完了できるかを測定します。

このチャートは、Haiku 5.5とより大規模なモデルとの重要な違いを示しています。Sonnet 5.5とOpus 5.5は、Terminal-Bench 4.0で測定されるような複雑なエージェントコーディングタスクにおいては、引き続きより良い選択肢です。対照的に、Haiku 5.5は、以前のClaudeのバージョンではコストがかかりすぎていた可能性のある、より限定的なスコープのタスク(コンパクション、要約、サブエージェントワークなど)に最も適しています。

次に、今週、すべてのMaxおよびTeamサブスクライバー向けに、Claude Platformで使用できる新しい月間APIクレジットをロールアウトします。Max 5xユーザーは毎月100ドルのクレジットを、Max 20xユーザーは200ドルのクレジットを、Teamサブスクライバーはユーザー全体で最大500ドルのクレジットを受け取ります。これらのクレジットは、ユーザーがAPIを呼び出すツール、アプリ、エージェントの構築を実験できるように設計されています。これらはすべてのモデルで使用できます。詳細については、ヘルプセンターの記事をご覧ください。

開発者向けには、コンピュータ利用とブラウザ利用をサポートするClaude PythonおよびTypeScript SDKをベータ版で更新します。Haiku 5.5は、その速度、機能、価格の組み合わせを考慮すると、これらのタスクに特に適しています。この詳細については、Claude Platformドキュメントでご覧いただけます。