AIToday

Claude Fable 5、業界別ベンチマーク全部門制覇 ただし価格は100倍以上

THE DECODER4時間前
Claude Fable 5、業界別ベンチマーク全部門制覇 ただし価格は100倍以上

要点

Artificial AnalysisがAnthropicのClaude Fable 5の業界別ベンチマークテスト全部門での優位性を報告しました。ただしClaude Fable 5は競争モデルより100倍以上のコストがかかり、同じ精度を求めないなら格安選択肢が存在することも明らかになっています。

こういう要約が、毎朝あなたのメールに届きます。

無料で登録 →

3つのポイント

  • 何が起きたか

    ベンチマーク企業Artificial Analysisが金融・法律・医療など6つの業界別性能指標を公開し、AnthropicのClaude Fable 5がすべての指標で首位を獲得しました。

  • なぜ重要か

    最高性能には大きな価格差を伴っています。Claude Fable 5は戦略・運用指標で1タスク$3.48かかる一方、DeepSeek V4 Proは$0.03で12ポイント差をつけられており、企業がコスト対効果の選択を迫られる状況が生まれています。

  • 注目点

    オープンウェイト(無償公開)モデルではGLM-5.2が業界別指標5部門で首位、エンジニアリング分野では53ポイント獲得し、Claude Sonnet 5と2ポイント差です。

背景と解説

Artificial Analysisが公開した業界別ベンチマークは、LMArena(ユーザーがモデルを盲検比較するプラットフォーム)と一貫した結果を示しており、Claude Fable 5の性能優位性は複数の独立指標で確認されています。ただし本記事が浮き彫りにするのは、性能リーダーと格安選択肢のあいだに大きな経済的トレードオフが存在するということです。

Engineer向けには「最初に高性能モデルで解けるかどうか確認してから、安いモデルで実行する」といった使い分け戦略が示唆されており、企業がフロンティアモデルの高コストを正当化できるほどの性能差が現在のベンチマークでは捉え切れていない可能性も論じられています。

よくある質問

Claude Fable 5の価格はどのくらい高いのですか?
戦略・運用指標では1タスク$3.48かかり、DeepSeek V4 Proの$0.03と比べると100倍以上の価格差があります。
オープンウェイトモデルの中で最も性能が高いのはどれですか?
GLM-5.2がオープンウェイトモデルとしてエンジニアリング指標で53ポイント獲得し、業界別指標5部門で首位を占めています。
このベンチマークはどのような方法で作成されましたか?
米国O*NETの職業分類をもとに、各業界で実際に求められるスキルを定義し、その頻度で重み付けしたベンチマーク組を独立して実施しています。

ディスカッション

まだコメントがありません。最初のコメントを投稿しましょう!

ログインして議論に参加

関連記事

AIニュースを毎日お届け

200以上のソースから厳選したAIニュースを毎日無料でお届けします。

無料で始める

登録無料・30秒で完了・いつでも解除できます

毎朝1分、AIの要点だけ。

200媒体以上・Email/LINE/Slack 対応

無料で受け取る →