Amazon Bedrock AgentCore、本番環境の改善を自動化するRecommendations機能とA/Bテスト機能をプレビュー提供開始

Amazon Bedrock AgentCoreが、本番トレースから推奨事項を生成し、バッチ評価とA/Bテストで検証する新機能をプレビュー提供開始。従来は開発者が手動でトレースを読み込み、仮説を立てて試行錯誤するサイクルに置き換わる。

Recommendations APIがCloudWatch Logグループのエージェントトレースを分析し、指定した評価指標（組み込み評価器またはカスタム評価器）に基づいてシステムプロンプトまたはツール説明の改善を提案。提案は不変でバージョン管理されたConfiguration bundleとしてパッケージ化され、ランタイムでAgenCore SDKを通じて動的に読み込まれる。

A/BテストはAgentCore Gatewayで本番トラフィックを分割し、統計的有意性と信頼区間を含む結果を報告。バッチ評価は事前定義されたテストデータセットに対して集計スコアを比較し、既知の重要なケースでの後退を検出する。

プレビューは開発者が推奨事項生成のタイミング、最適化対象の評価器、結果の昇格を選択する設計。将来的にはアラーム発火時の自動推奨や複数評価器の統合、スキル提案への拡張を検討中。