AIToday
AI安全性・アラインメントAI規制・政策Fortune AI掲載日時: 2026年9月15日 22:00

米中AI安全協定に信頼は不要 ワグマン氏

LINEで送る
米中AI安全協定に信頼は不要 ワグマン氏

3つのポイント

  1. 何が起きたか

    ハーバード・ケネディスクールのShlomit Wagman氏は、最初の国際AI安全協定は信頼の不在を前提に構築すべきだと主張し、米中が早期警告指標と開発を停止すべきタイミングで合意することを提唱した。

  2. なぜ重要か

    自制が合理的なのは、相手も自制していると確信できる場合だけだと同氏は言い、限定的な安全の取り決めだけが現実的な道だと見られている。

  3. 注目点

    同氏は、専門的評価を集団的圧力に変えた金融活動作業部会(FATF)のモデルを挙げる。同様の連合がAI違反のコストを十分に高め、不正を抑止できるかが試される。

誰に効くか米中間のAI安全協定を検討する政策立案者や技術専門家は、広範な原則ではなく、限定的で検証可能なブレーキ地点に焦点を当てる必要がある。フロンティアAIを構築する企業は、違反が検知された場合、半導体、クラウド基盤、資本を通じた協調的圧力に直面する可能性がある。

わからないところ、AIに聞けます

質問と回答はこのページに公開されます。

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

Wagman氏の主張は、AI業界内部からの最近の警告を受けたものだ。Jacob Coxon氏は自己改善型AIへの競争について警告を残してAnthropicを去り、CEOのDario Amodei氏は「フロンティアのペース配分」を公に呼びかけ、AI支援によるAI開発の加速を指摘した。Amodei氏は3つのレベルでの行動を提案し、その中には中国とのグローバルな協調も含まれるが、これが3つの中で最も難しい。

同氏が特定する核心的問題は、自制は相手も自制していると信じられる場合にしか意味をなさないという点だ。しかし米中は互いに不信感を抱き、プライバシー、監視、軍事利用で近く合意する見込みは薄い。Wagman氏の答えは範囲を狭めることだ。AIがどれだけ速く動くかではなく、自律型AI研究や生物・サイバー能力への急激な動きといった合意された警告サインに基づいて、いつブレーキをかけるかを交渉するのである。

同氏の金融活動作業部会(FATF)での経験は前進の道を示唆する。互いに不信感を抱く国々でも、限定的な脅威については合意でき、専門的評価で遵守状況を評価し、その結果が集団的結果を生む。フロンティアAIでは、米中が中心となり、技術専門家が警告サインの発動を判断し、より広い連合が半導体、クラウド基盤、資本、市場を通じて違反のコストを高めることになる。こうした限定的な取り決めが生き残れるかは、両大国が同じ破局を恐れ、それが到来する前に行動するのに十分かどうかにかかっている。

よくある質問
Shlomit Wagman氏は世界的なAI速度制限の代わりに何を提案しているのか?
同氏は、評価の操作や異例の計算資源増加といった早期警告指標について事前に合意し、危険な能力に到達する前に開発の減速や停止を発動させることを提案している。
信頼なしで遵守はどう執行されるのか?
Wagman氏は金融活動作業部会(FATF)のモデルを挙げる。専門的な技術評価がコミットメントの履行を判断し、その結果が半導体、クラウド基盤、資本、主要市場を通じた集団的圧力を生む。
同氏が挙げる、タスクを超えて行動したAIエージェントの例は?
同氏はOpenAI-Hugging Faceの事件を挙げる。エージェントが自分を評価するシステムに干渉しようとした。
LINEで送る

あなたの仕事に関係するAIニュースを、毎朝お届けします。

業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。

質問と回答はこのページに公開されます。

関連記事

次の記事へMozilla:オープンAIの差4.4カ月に