AIToday
AIビジネス・産業TechCrunch AI掲載日時: 2026年9月17日 10:00

アモデイ氏らAI安全評価の常駐支持

LINEで送る
アモデイ氏らAI安全評価の常駐支持

3つのポイント

  1. 何が起きたか

    Anthropic CEOのDario Amodei氏が、METRやRedwood Researchを内部に常駐させ、Anthropicの編集権が及ばない形で調査結果を公表する権利を与える案を提唱。

  2. なぜ重要か

    評価機関がトレーニングのチェックポイントやログへの実質的なアクセスを得られれば、テスト中は問題なく振る舞いながら問題を隠すモデルを発見できる可能性がある。現在のリリース前テストでは見逃しかねない。

  3. 注目点

    この約束が意味を持つかは、企業がアクセスと公表の管理権を実際に手放すかどうかにかかっている。GPT-6 Astraに対する3日間の評価期間など、これまでの評価の窓は短すぎて確たる結論を出せなかった。

誰に効くか先端AIラボの政策・コンプライアンス担当チームやMETRのような第三者評価機関は、新たなアクセス・NDA・公表ルールに直面することになる。カリフォルニア州とEUの規制当局は、自発的な約束で十分かを見極めることになる。

わからないところ、AIに聞けます

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

AnthropicとOpenAIの支持は、モデルのリリース直前にだけ外部レビュアーを招くという業界のこれまでの慣行からの転換を意味する。TechCrunchの取材に応じた評価機関側は、中間トレーニングのチェックポイント、ポストトレーニング環境、評価の記録にアクセスできれば、企業の安全性に関する公表主張を検証し、問題行動がいつ最初に現れたかを追跡できると主張する。

過去の取り組みの実績が示すのは、難しいのは原則ではなく条件だということだ。FAR.AIは過度の管理を求める開発企業との契約を断っており、研究者によればOpenAIがMETRとRedwoodに与えたHugging Faceインシデントの調査期間は約1週間、Apollo ResearchがGPT-6 Astraをテストできたのはわずか3日間だった。こうした制約が確たる結論を難しくした。

この提案が意味ある監視体制になるかは、企業の善意ではなく規制に裏打ちされるか、そして監査人が自由に公表できるかにかかっている。研究者は監査人の資格基準やSB 813のような法律を拠り所として挙げる。ラボにとっての試金石は、自分たちが編集できない外部の調査結果を受け入れるかどうか。評価機関にとっては、アクセスが実質的かつ持続的かどうかだ。

よくある質問
どの独立評価機関が常駐するのか?
Anthropic CEOのDario Amodei氏はMETRとRedwood Researchを例として挙げた。両社が実際にどの評価機関と組むかは明言していない。
第三者によるAI評価をすでに規制する法律は?
カリフォルニア州のSB 53は、大手先端AI開発企業に対し安全フレームワークの公表と重大な安全インシデントの報告を義務付けている。新法SB 813は、州が認定する独立検証機関の枠組みを創設する。欧州ではEU AI Actが、先端開発企業にモデル評価の実施・文書化と重大インシデントの報告を求めている。
他の大手AI企業もコミットしたか?
Meta、SpaceXAI、Google DeepMindは第三者の評価機関の常駐にコミットしていない。ただしDeepMind CEOのDemis Hassabis氏は、先端モデルを独立にテストする別個の業界標準団体を提案している。
TechCrunch AI元記事を読む
LINEで送る

「AIビジネス・産業」の最新ニュースを、毎朝7時にお届けします

たとえば、いま届くならこの3本です

  • CADDi、評価額12億ドルで1.14億ドル調達SiliconANGLE AI · 2時間前
  • Hang Ten Systems、5300万ドル調達SiliconANGLE AI · 2時間前
  • マスク氏、Tesla-SpaceX合併を示唆DIGITIMES Asia · 2時間前

AIが要約して、あなたの選んだトピックだけを1日1通。LINE・Email・Slackで届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。Q&Aはこのページに公開され、他の読者も読めます。

関連記事

次の記事へOpenAI、モデル不整合の報告書6件を公開