AIToday
大規模言語モデルAI安全性・アラインメントAI Weekly掲載日時: 2026年10月31日 4:00

A-RSIが古いタスクを自動更新

LINEで送る
A-RSIが古いタスクを自動更新

3つのポイント

  1. 何が起きたか

    2026年10月28日にarXivで公開されたA-RSIは、アドバンテージ保持率が85%未満に低下するか、一定期間内に精度が10ポイント以上跳ね上がるとモデルのタスクプールを更新し、11ベンチマーク平均を57.77から61.05に引き上げた。

  2. なぜ重要か

    この手法はどのタスクを生成するかだけでなく、現行タスクが情報を与えなくなった時点を扱う。

誰に効くか自己改善モデルに取り組むAI研究チームが恩恵を受け得る。学習ループから人手ラベルの必要性を取り除き、再帰的自己改善パイプラインを大規模運用でより実用的にし得るためだ。ただし著者らが指摘する検証の空白は、こうしたシステムを導入するエンジニアにとって重要になり得る。

わからないところ、AIに聞けます

質問と回答はこのページに公開されます。

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

A-RSIは、中国科学院IIE、CUHK、CMU、ヴュルツブルク大学、マックス・プランク研究所、トレント大学などの機関に所属する20人の研究者チームによる成果だ。論文は2026年10月28日にarXivへ投稿された。

自己改善の研究の多くはどのタスクを生成するかに焦点を当てるが、A-RSIはその前段階である、現行タスクがいつ情報を与えなくなるかという問いを扱う。この手法は、画像と独立に検証可能な参照回答を生成するモデル作成プログラムの静的ライブラリから新タスクを生成するため、正しさの検査はモデルの自己一貫性に依存しない。この設計判断が、どの時点でも人手ラベルなしでループを回せる理由かもしれない。

論文の効率比較は具体的だ。毎ウィンドウ更新を続けるベースラインは3,200タスクを消費して60.64に達するのに対し、A-RSIは800タスクで61.05に達し、約4分の1のタスク予算でより高い最終スコアを得る。ラベル不要の制約が重要なのは、ほとんどの再帰的自己改善パイプラインを大規模運用で非現実的にするボトルネックを取り除くからだと著者らは述べている。ベンチマークは数学、視覚、グラフ推論にまたがるため、狭いタスク群への偏りで平均が水増しされることはない。著者らはSMTソルバーによる検証が対象とした4つの性質のみをカバーし、実装全体の正しさまでは対象外だと注記しており、導入を検討するチームにとっては制約になり得る。

よくある質問
A-RSIはタスクプールを更新するタイミングをどう判断するのか?
学習ログの2つの指標を監視する。1つはアドバンテージ保持率で、再サンプリング後に非ゼロのアドバンテージを生み出すプロンプトの割合。もう1つは移動平均の精度指標。アドバンテージ保持率が85%未満に下がるか、一定期間内に精度が10ポイント以上上がると更新が発動する。
A-RSIの性能測定にはどのベンチマークが使われたか?
11のベンチマークは数学、視覚、グラフ推論にまたがっており、狭いタスク群に偏ることで平均が水増しされることはない。
この手法は形式的に検証されたのか?
はい。報酬構造と更新ロジックはSMTソルバーで形式的に検証された。ただし著者らは、検証が対象とした4つの性質のみをカバーし、実装全体の正しさまでは対象外だと注記している。
LINEで送る

あなたの仕事に関係するAIニュースを、毎朝お届けします。

業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。

質問と回答はこのページに公開されます。

このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る

関連記事

次の記事へGoogleの衛星AIが宇宙から初応答