
何が起きたか
Uberは多層防御フレームワーク「Uber Secure AI」の詳細を公開した。AI Registry、AI Guard、可観測性とリプレイを備えた継続的保証という3つの統合層で構成する。
なぜ重要か
Uberによると最も効果的だった対策は、エージェントを明示的な意図と制約に限定することだった。柔軟性の一部を犠牲にする代わりに、操作された指示に従って行動する能力を減らせたという。
誰に効くか本番ツールや機密データへのアクセス権を持つAIエージェントを導入するセキュリティおよびプラットフォームエンジニアリングのチームが、Uberのフレームワークとそのトレードオフの想定読者だ。
こういう要約が、毎朝あなたのメールに届きます。
Uberの投稿は、エージェント型AIを攻撃対象領域の変化として捉えている。定義済みのロジックを実行するのではなく、エージェントはユーザー、ウェブページ、文書、ツール、他のエージェントからのコンテンツを推論し、その推論を現実の行動に変換できる。これによりセキュリティ問題の一部は、IDやAPIの制御から、Uberがセマンティック層と呼ぶ領域へ移る。プロンプトインジェクション、ツールやメモリの汚染、目標の乗っ取り、行動の drift、幻覚に起因する行動といったリスクが生まれる。Uberによれば、従来の認可は誰が行動を許されているかを判断できても、その行動がユーザーの要求やエージェントに定義された目的、セッションの文脈と整合するかは判断できない。
このフレームワークはAI Registryを基盤とする。AI RegistryはエージェントのID、所有者、ペルソナ、許可された意図、制約、依存関係、リスク階層を記録し、Argusと呼ばれる自動化プラットフォームがソースコード、プロンプト、ツール呼び出し経路を分析して構造化された意図を導き出す。Uberは商用のAIセキュリティおよびガードレールプラットフォームと従来のポリシーエンジンを評価したが、対象とする脅威モデルに完全に対応できるものはなかったと述べている。同社は実用上のトレードオフも説明する。強制を強めれば誤ブロックが増え、実行時の評価は遅延と推論コストを追加し、導入の複雑さはチームが制御を回避する方向に働きかねない。
Uberはこの取り組みをセキュリティであると同時にエンジニアリングの問題と位置づけ、共通のインフラポイントに制御を組み込むことで、エージェントが作成・導入される際に保護を継承できるようにしている。次の段階では間接的なプロンプトインジェクションへの防御を拡大し、エージェントの検出とレッドチーミングをさらに自動化すると述べている。この投稿は個々の制御を扱うシリーズの第1回だという。
業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。
登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →
この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。
このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る
MastercardがAIショッピングエージェント企業firmlyの$15mシリーズAラウンドに参加し、小売業者と消費者向けのAI搭載ショッピングエージェント開発で決済パートナーとなった

バークシャー・ハサウェイ株は今週5%超上昇し、S&P500が約2.7%下落する中、B株は年初来でベンチマークを5.8ポイント上回った

Isomorphic Labs社長のMax Jaderberg氏は11月2日、ロンドンで開催されたBloomberg Techで、AIがいずれすべての薬を設計するようになると述べた

新たに当選したテキサス州の民主党当局者がAIワークロード関連の大規模データセンターインフラの承認を一時停止すると公約し、GE Vernovaの送配電・発電設備がより厳しい許認可プロセスに置かれることになった

Teslaは「SI(Super Intelligence)」ブランドのチップロードマップを公開し、推論アクセラレータSI6が現行の第4世代チップ比で80倍の演算性能をもたらすと説明した

Metaは既存モデルの特化版を、Muse Wonderを使って訓練し、MuseとMeta AIのユーザーに展開した
