
Artificial AnalysisがSearch Indexをローンチ。AIエージェントが使用する検索APIプロバイダーを品質・コスト・速度の3軸で評価するベンチマーク。
同一AIモデルで7つのプロバイダーをテストした結果、検索品質は全体コストの低さと直結することが判明した。クエリあたりの手数料が高くても、良好な検索結果はトークン消費を削減しエージェント精度を高める。
Parallel、Exa、Firecrawlが品質ランキングで首位(それぞれ75、74、73点)。Parallelの上位版はトークン使用量を40%削減、タスクあたり全体コストを低下させた。
何が起きたか
Artificial Analysisが Search Indexベンチマークをリリース。Parallel、Exa、Firecrawl、You.com、Tavily、Keenable、Braveの7つの検索APIプロバイダーを、同一のAIモデル(GPT-5.6 Luna)で同じエージェント環境下でテスト。ベンチマークは3つの均等配分されたテストスイート—DeepSearchQA(900件の研究質問)、BrowseComp(200件の難しい事実発見タスク)、AA-Omniscience(6領域600問)—で構成される。
なぜ重要か
検索品質はAIエージェントの性能とコスト両方に直結する。検索なしではモデルは33点だが、検索ありでは65〜75点に跳ね上がる。良好な検索品質はトークン総使用量を削減する。Parallelの上位版は基本版比で40%以上のトークン消費削減を達成し、1検索あたりの手数料が高いにもかかわらず、タスク全体のコストは0.11ドルから0.084ドルに低下。企業は適切な検索プロバイダーを選択することで精度と支出の両方を最適化できる。
注目点
Parallel、Firecrawl、Parallel(ターボ版)が最良のコスト・パフォーマンス混合を達成したが、クエリあたりの生速度がタスク全体時間の短縮につながるとは限らない。Parallelのターボ版はクエリあたり最速(0.51秒 対 基本版1.03秒)だが品質が低く(67 対 73)、エージェントがより多くのパスを実行する必要があり、全体時間は変わらない。方法論は公開されており、他のプロバイダーは参加申請が可能。
Artificial AnalysisがSearch Indexを構築した理由は実務的なギャップを埋めるため。AIエージェント向け検索APIを、品質・コスト・速度すべてが重要なとき、どう比較するのか。モデル(GPT-5.6 Luna)、フレームワーク(Stirrup)、テストシナリオ(スイートあたり900〜600問)を標準化することで、ベンチマークは検索プロバイダーを唯一の変数として分離。この厳密なアプローチから一見矛盾する知見が生まれた。クエリあたりの最速検索がタスク全体の最速完了を保証しないのだ。Parallelのターボ版は最短応答時間(0.51秒)を実現するが、品質が低いため、エージェントが追加パスを実行する必要があり、速度優位を相殺する。一方、Parallelの上位版とExaは生速度より品質を優先し、必要なクエリ数を削減しトークン消費を抑制。1検索あたりの手数料が高くても、全体コストの削減につながる。ベンチマークが示すのは、AIエージェントにとって品質は経済的テコ。少数の高精度クエリは、多数の低品質な安価クエリより全体コストが安い。
AIが要約して、あなたの選んだトピックだけを1日1通。LINE・Email・Slackで届きます。
登録無料・30秒で完了・いつでも解除できます
この記事についてわからないことをAIに質問できます。Q&Aはこのページに公開され、他の読者も読めます。