AIToday

Uber、AIエージェント向け多層防御の枠組みを公開

LINEで送る
Uber、AIエージェント向け多層防御の枠組みを公開

3つのポイント

  1. 何が起きたか

    Uberは多層防御フレームワーク「Uber Secure AI」の詳細を公開した。AI Registry、AI Guard、可観測性とリプレイを備えた継続的保証という3つの統合層で構成する。

  2. なぜ重要か

    Uberによると最も効果的だった対策は、エージェントを明示的な意図と制約に限定することだった。柔軟性の一部を犠牲にする代わりに、操作された指示に従って行動する能力を減らせたという。

誰に効くか本番ツールや機密データへのアクセス権を持つAIエージェントを導入するセキュリティおよびプラットフォームエンジニアリングのチームが、Uberのフレームワークとそのトレードオフの想定読者だ。

わからないところ、AIに聞けます

質問と回答はこのページに公開されます。

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

Uberの投稿は、エージェント型AIを攻撃対象領域の変化として捉えている。定義済みのロジックを実行するのではなく、エージェントはユーザー、ウェブページ、文書、ツール、他のエージェントからのコンテンツを推論し、その推論を現実の行動に変換できる。これによりセキュリティ問題の一部は、IDやAPIの制御から、Uberがセマンティック層と呼ぶ領域へ移る。プロンプトインジェクション、ツールやメモリの汚染、目標の乗っ取り、行動の drift、幻覚に起因する行動といったリスクが生まれる。Uberによれば、従来の認可は誰が行動を許されているかを判断できても、その行動がユーザーの要求やエージェントに定義された目的、セッションの文脈と整合するかは判断できない。

このフレームワークはAI Registryを基盤とする。AI RegistryはエージェントのID、所有者、ペルソナ、許可された意図、制約、依存関係、リスク階層を記録し、Argusと呼ばれる自動化プラットフォームがソースコード、プロンプト、ツール呼び出し経路を分析して構造化された意図を導き出す。Uberは商用のAIセキュリティおよびガードレールプラットフォームと従来のポリシーエンジンを評価したが、対象とする脅威モデルに完全に対応できるものはなかったと述べている。同社は実用上のトレードオフも説明する。強制を強めれば誤ブロックが増え、実行時の評価は遅延と推論コストを追加し、導入の複雑さはチームが制御を回避する方向に働きかねない。

Uberはこの取り組みをセキュリティであると同時にエンジニアリングの問題と位置づけ、共通のインフラポイントに制御を組み込むことで、エージェントが作成・導入される際に保護を継承できるようにしている。次の段階では間接的なプロンプトインジェクションへの防御を拡大し、エージェントの検出とレッドチーミングをさらに自動化すると述べている。この投稿は個々の制御を扱うシリーズの第1回だという。

よくある質問
Uber Secure AIの3つの層とは何か?
プロビジョニング時の検証、実行時の強制、継続的保証の3つだ。このフレームワークはこれらの統合層でエージェントのライフサイクル全体をカバーする。
Uberにとって最も効果的だった対策は何か?
何がどのような条件下で起きてよいかを厳格に統制する、明示的な意図と制約にエージェントを限定することだ。これにより操作された指示に従って行動する能力が大幅に減ったが、柔軟性の一部は犠牲になったとUberは述べた。
Uberはなぜ既存のAIセキュリティプラットフォームに頼らなかったのか?
Uberは商用のAIセキュリティおよびガードレールプラットフォームに加え、従来のポリシーエンジンや認可技術も評価した。しかし、すべてのAPI呼び出しが正規に認可されていても、エージェントが意図しない行動へ操作されるケースに完全に対応できるものはなかったという。
Top Companies AI元記事を読む
LINEで送る

あなたの仕事に関係するAIニュースを、毎朝お届けします。

業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。

質問と回答はこのページに公開されます。

このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る

関連記事

Mastercard、AI商取引企業に出資

MastercardがAIショッピングエージェント企業firmlyの$15mシリーズAラウンドに参加し、小売業者と消費者向けのAI搭載ショッピングエージェント開発で決済パートナーとなった

NEWTop Companies AI11分前

Berkshire株5%超上昇

バークシャー・ハサウェイ株は今週5%超上昇し、S&P500が約2.7%下落する中、B株は年初来でベンチマークを5.8ポイント上回った

NEWTop Companies AI11分前

Isomorphic Labs社長がAI設計薬を予測

Isomorphic Labs社長のMax Jaderberg氏は11月2日、ロンドンで開催されたBloomberg Techで、AIがいずれすべての薬を設計するようになると述べた

NEWTop Companies AI11分前

GE Vernovaに許認可停止リスク

新たに当選したテキサス州の民主党当局者がAIワークロード関連の大規模データセンターインフラの承認を一時停止すると公約し、GE Vernovaの送配電・発電設備がより厳しい許認可プロセスに置かれることになった

NEWTop Companies AI11分前

TeslaがSI6で80倍性能を発表

Teslaは「SI(Super Intelligence)」ブランドのチップロードマップを公開し、推論アクセラレータSI6が現行の第4世代チップ比で80倍の演算性能をもたらすと説明した

NEWTop Companies AI11分前

Meta、MuseとMeta AIに特化モデルを展開

Metaは既存モデルの特化版を、Muse Wonderを使って訓練し、MuseとMeta AIのユーザーに展開した

NEWTop Companies AI11分前
次の記事へAI・半導体相場の損切りと買い場の見極め術