AIToday
大規模言語モデルAIコーディングオープンソースAIAmazon AI Blog掲載日時: 2026年11月14日 10:00

AWSがコーディングエージェントのモデル振り分けサンプル公開

LINEで送る
AWSがコーディングエージェントのモデル振り分けサンプル公開

3つのポイント

  1. 何が起きたか

    AWSはNVIDIA NeMo Switchyardプラグイン入りLiteLLMをAmazon ECS FargateにデプロイするAWS CDKサンプルを公開した。

  2. なぜ重要か

    Stageルーティングはツール結果のない新規リクエストをNemotronに送り、履歴に繰り返しの失敗があればClaude Opus 5.5にエスカレーションする。

わからないところ、AIに聞けます

質問と回答はこのページに公開されます。

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

このサンプルはコーディングエージェントの実務上のギャップを狙う。開発者の1つのタスクにモデル呼び出しが数回で済むこともあれば数十回に及ぶこともあり、エージェントは作業が終わるまでファイルを読み、コードを編集し、テストを実行し続ける。このデプロイではLiteLLMとSwitchyardプラグインをAmazon ECS Fargateの1つのコンテナにまとめ、プライベートサブネットに置く。AWS WAF、/v1/chat/completions、/v1/models、/health/livelinessを対象とするパス許可リストを備え、推論トラフィックはAmazon Bedrock Runtimeのインターフェースエンドポイント経由で運ばれるためAWSネットワーク内に留まる。構成はルーティンググループと2つの単一モデルベースライングループ(claude-opus-5-5とnemotron-super-3-120b)を同じデプロイに保持するため、同じスタックでルーティング構成と単一モデル構成の両方を提供できる。

Stageプロファイルはpicker = "efficient_first"、confidence_threshold = 0.5、recent_window = 3を設定するため、ツール結果のない新規リクエストはNemotron 3 Superに送られ、Stageがシグナルを読むにはエージェントが会話履歴全体を送る必要がある。AWSは、OpenAI ResponsesやAnthropic Messagesのパスを使うクライアントは404になること、ローカルのDocker Composeオプションでも課金対象のAmazon Bedrock呼び出しが発生することを注記している。短時間のテスト向けに平文HTTPのオプトインもあるが、プロンプト、ツール結果、レスポンスが暗号化されないため、AWSはテスト後にキーをローテーションしスタックを破棄するよう勧めている。

よくある質問
サンプルはどのモデル間でルーティングするのか?
Claude Opus 5.5(高性能モデルとして最初に記載)とNVIDIA Nemotron 3 Super 120B(効率的なモデル)を使う。この組み合わせはUS East (N. Virginia)でテスト済みだ。
利用できるルーティング戦略は?
LiteLLM連携は、直近のツール活動と結果を読み取って2つの候補から1つを選ぶStageと、任意の重みでモデル間のトラフィックを分けてA/Bテストを行うRandomに対応する。TaskやCompositeといった分類器ベースの戦略には対応していない。
本番運用できるのか?
いいえ。AWSは非本番用途向けのサンプルコードと説明し、非本番アカウントにデプロイしてまずテストするよう勧めている。インストールされるswitchyard-server 0.3.0は、NVIDIAがデモ・評価用コンポーネントとしているものだ。
Amazon AI Blog元記事を読む
LINEで送る

あなたの仕事に関係するAIニュースを、毎朝お届けします。

業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。

質問と回答はこのページに公開されます。

このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る

関連記事

Reson8、5億パラメータの音声認識モデルを無償公開

Reson8は5億パラメータの音声認識モデルRumble-2-FlashをApache 2.0ライセンスの無償オープンウェイトとして公開した

NEWSiliconANGLE AI4時間前

マイクロソフトがAIエージェントで攻撃対抗サービス提供開始

Microsoft Ignite 2026でマイクロソフトは赤・青・緑チームのエージェントを組み合わせ攻撃模擬・検知調査・脆弱性修正を行うMicrosoft Perceptionの一般提供を発表した

NEWPublickey4時間前

Windows Server 2028がパブリックプレビュー公開

Microsoft Ignite 2026でWindows Server 2028のパブリックプレビューが公開され、Microsoft Foundry、Windows ML、vLLM、Llama.cppによるAI推論ホス…

NEWPublickey4時間前

AUMOVIOがLLMの唯一の経路をDatabricksに統一

AUMOVIOはDatabricks Unity GatewayをLLMへの唯一の経路に採用

NEWDatabricks AI Blog4時間前

CADMAGEDDON、5ベンチマークで最先端CADモデル超え

CADMAGEDDONはBenchCADの64³ボクセルIoUで、1000部品のサブセットにおいて0.991を記録し、Claude Sonnet 5.5の0.963、Claude Opus 5.5の0.962、GPT-6…

NEWAI Weekly4時間前

MIT Technology ReviewのAI指数、AIは遍在

MIT Technology ReviewのAI誇大広告指数はAIの広がりを示し、GoogleのAI Overviewsが広告収入で数十億ドルを失わせたことやAI支援のサイバー攻撃を挙げた

NEWMIT Technology Review AI4時間前
次の記事へShield、GPT‑6 Astraでレガシーポータル作業を自動化