AIToday
大規模言語モデルHacker News掲載日時: 2026年7月29日 1:00

Exabaseが最難関AI記憶ベンチマークで最高スコア、小型モデルで達成

LINEで送る
Exabaseが最難関AI記憶ベンチマークで最高スコア、小型モデルで達成

3つのポイント

  1. 何が起きたか

    Exabaseの創業者が、AI記憶ベンチマーク「BEAM」で最高スコアを報告しました。同社のシステム「M-1」は、100Kトークンで76.9%、1Mトークンで75.0%、10Mトークンで68.0%を記録。従来の最高成績はHindsight(73.4%、73.9%、64.1%)でしたが、M-1は全スケールで上回りました。

  2. なぜ重要か

    10Mトークンは年間の長日常対話に相当する規模で、従来のモデルはこのスケール対応が困難でした。M-1は小型モデル(Gemini 3 Flash)を使用しながら、大型モデル(Gemini 3 Pro)に依存していた従来システムを上回ったことで、効率的な記憶システム設計の道を示しています。

  3. 注目点

    M-1はクエリあたりの消費トークン数で次点システムより約20%少ないという効率性を示す一方、10Mスケールでの多セッション推論は9.6%と弱点があり、今後の課題として認識されています。詳細は https://exabase.io/research/exabase-achieves-state-of-the-art-on-beam-benchmark を参照。

わからないところ、AIに聞けます

質問と回答はこのページに公開されます。

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

BEAMは従来のベンチマークでカバーしていない矛盾解決やイベント順序付けといった能力を評価する、最難関の記憶ベンチマークです。10Mトークンというスケールでは、モデルのコンテキストウィンドウ詰め込み(context stuffing)は不可能であり、根本的に機能する記憶機構が不可欠です。ExabaseはこのスケールでHindsightに3.9ポイント、Honcho に27.4ポイント以上の差をつけ、特にスケール拡大時の効率性が優れていることを示しました。同時にM-1は、大型モデル(Gemini 3 Pro)を使用していた従来最高成績者を、小型モデル(Gemini 3 Flash)で上回ったことで、モデルサイズと記憶能力の関係について新たな知見を提供しています。一方、多セッション推論での大幅な性能低下は、記憶システム全体の今後の課題と指摘されています。

よくある質問
BEAMベンチマークとは何を測定していますか?
BEAMは矛盾解決、イベント順序付け、指示遵守を含む10の記憶能力をテストするベンチマークです。10Mトークンのスケールは、AIとの年間の長日常対話に相当します。
従来の最高成績システムとどのくらい差がありますか?
100KトークンではHindsightに3.5ポイント差、10Mトークンでは3.9ポイント差をつけました。スケールが大きくなるほど、効果的な記憶機構が弱いシステムとの差が広がっています。
M-1にはどんな弱点がありますか?
多セッション推論で弱さが見られ、100Kトークンで44.7%、10Mトークンで9.6%にまで低下します。これは記憶システム全般の課題だと判断されています。
LINEで送る

あなたの仕事に関係するAIニュースを、毎朝お届けします。

業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。

質問と回答はこのページに公開されます。

関連記事

次の記事へFish Audio、5200万ドル調達