
何が起きたか
OpenAIのDecisions APIが木曜日、全顧客に利用可能になった。9月29日の開発者デーで発表。
なぜ重要か
応答時間の高速化により、1〜3秒の遅延が遅すぎた用途、例えばビデオ通話のフレーム単位処理などに開発者がAPIを組み込めるようになる。製品責任者のNikunj Handa氏が述べた。
誰に効くか高スループットやリアルタイムのアプリケーションを開発するソフトウェア開発者、例えばAI語学講師や音声アシスタントは、定型判断向けのより高速で安価なモデルに切り替えられるようになった。AI語学講師のSpeakはこのAPIを使い、アクション時間を1.4秒から0.13秒に短縮した。
こういう要約が、毎朝あなたのメールに届きます。
OpenAIの今回の動きは、同フロンティアラボの元研究者が創業したスタートアップTypeSafeの最近の台頭を受けたものだ。同社のJevモデルは、スーパークラシファイアとして機能する高速・低コストの判断モデルというカテゴリーを生み出した。ソフトウェア開発者はすぐに、こうしたモデルが一部のワークフローでLLMを大幅に低いコストで置き換えられることに気づいた。Handa氏によると、同僚たちはJevを見て、自分たちにも100万件のユースケースがあると気づき、チームは独自版の開発に突き進んだ。OpenAIは専用に調整した判断モデルを構築するのではなく、ChatGPT Lunaを再構成して推論を高速化しコストを下げた。
競争環境はすでに混雑している。AIM System One IndexやArtificial Analysis Decision Indexといった公開ベンチマークは、LiquidのD1 UltraやBase LabのElephant-1を高く評価する傾向がある。最新のJevモデルはこれらの指標で7位と3位につける一方、OpenAIのDecision Modelは8位と14位だ。それでも、TypeSafeの製品は今のところOpenRouterで最も多く問い合わせられている。モデルがPacManをプレイするベンチマークJevManでは、最新のJevモデルが首位に立つ。OpenAIの強みはマルチモーダルにあるかもしれない。Handa氏によれば、Lunaは極めて強力で、画像分類でより良いキャリブレーションを示しているという。
業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。
登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →
この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。