AIToday
AI安全性・アラインメント主要企業のAIニュースAIビジネス・産業Top Companies AI掲載日時: 2026年7月18日 6:31

Cisco AI Defense、多言語安全テストで0.845のF1スコアを獲得

LINEで送る
Cisco AI Defense、多言語安全テストで0.845のF1スコアを獲得

3つのポイント

  1. 何が起きたか

    Cisco AI Defenseは、8万件のオランダ語プロンプトに関する独立したML6ベンチマークで最高のF1スコア(0.845)を達成し、プロンプト注入、ポリシー回避、実際のエンタープライズ相互作用に対するテストを実施しました。このシステムはポルトガル語からアラビア語、日本語まで、言語系統が異なる9言語全体でF1スコア0.796~0.860の範囲を維持しました。

  2. なぜ重要か

    エンタープライズAIは多言語・複数ターンの会話で動作するため、単一言語のガードレールでは保護できません。Ciscoの憲法的分類法は、各技法に対する正確で機械実行可能な運用定義を提供し、段落レベルの定義と比べて異なるモデル間の不一致を最大57倍削減します。これにより、会話の文脈に関わらず、フランス語、日本語、アラビア語で同じセキュリティルールを等しい精度で適用できます。

  3. 注目点

    リアルタイムパフォーマンスは重要であり、Cisco AI Defenseはリクエストあたりp90=40ミリ秒、p99=250ミリ秒を追加して、チャットボット、コパイロット、エージェント型パイプラインのエンタープライズSLAを満たします。このシステムは高リコール(0.843)と高精度(0.847)を同時に実現し、可用性を低下させる誤検知問題を回避します。ベンチマーク内の競合するガードレールは0.453のF1にしか達しませんでした(リコール0.327)。

わからないところ、AIに聞けます

質問と回答はこのページに公開されます。

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

エンタープライズAI安全性は従来、プロダクション環境の現実と一致しない単一言語・単一ターンベンチマークに依存してきました。ML6ベンチマークとCiscoの評価は、重大なギャップを浮き彫りにしています。Ciscoが15の最先端モデルにわたって実施した研究では、テストしたすべてのモデルが意味のある複数ターン脆弱性を示し、攻撃成功率は単一ターンベンチマークと一貫性のある関係を持たないことが判明しました。攻撃者は分離して攻撃するのではなく、反復し、拒否をリフレーミングし、ターンをまたいで段階的にエスカレーションします。この転換により、セキュリティ境界線はモデル自体から外へ、ユーザー、モデル、データ、ツール間のライブ会話へと移動しています。

Ciscoの憲法的分類法は、段落レベルの安全性ラベルに依存するのではなく、技法ごとに正確な運用仕様を確立することで、この課題に対応しています。定義が機械実行可能であるため、ラテン文字のヨーロッパ言語からアラビア語、日本語まで、言語系統が異なる言語で確実に転換されます。9言語全体でF1範囲0.796~0.860は、この一貫性を実証しています。対照的に、ベンチマーク内の競合するガードレール解決策は0.453のF1に達し、誤検知(精度0.737、リコール0.327)で崩壊しました。Ciscoは0.843のリコール精度0.847を同時に達成し、正当な使用を無効にすることなく保護するバランスを実現しています。

プロダクション展開には追加の制約があります:レスポンスタイムSLA、レイテンシに敏感なエージェント型パイプライン、継続的なモデル進化です。Cisco AI Defenseは、わずかなオーバーヘッド(p90=40ミリ秒、p99=250ミリ秒)を追加するように調整されながら、エンタープライズが実行するすべての言語、モデル、展開フレームワーク全体でランタイム保護をサポートし、ベンダーまたはフレームワークの選択とは無関係に動作します。

よくある質問
Ciscoはどの言語でテストしましたか?
Ciscoは9つの言語系統が異なる言語でAI Defenseを評価しました:英語、オランダ語、ポルトガル語、アラビア語、およびLMSYS Chat-1MおよびWildChatデータセットから拡張して抽出した5つの言語です。ML6ベンチマークは具体的に8万件のオランダ語プロンプトを独立してテストしました。
Ciscoのガードレールは他と比べてどのくらい高速ですか?
この記事は競合他社のレイテンシと比較していません。Ciscoの独自のパフォーマンスのみを報告しており、p90=40ミリ秒、p99=250ミリ秒で、リアルタイム会話SLAと互換性があると述べています。
Ciscoはどのように「憲法的」ガードレールを定義していますか?
Ciscoは憲法的定義を使用しています。正確な技法ごとの運用仕様であり、分類、モデル訓練、顧客向け説明のための唯一の情報源として機能します。仕様が機械実行可能であるため、言語全体で等しい精度で適用され、段落レベルの定義と比べて異なるモデル間の不一致を最大57倍削減します。
Top Companies AI元記事を読む
LINEで送る

あなたの仕事に関係するAIニュースを、毎朝お届けします。

業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。

質問と回答はこのページに公開されます。

このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る

関連記事

次の記事へ富士通、自己進化型マルチAIエージェント検証を開始