
AMDが推論特化チップのスタートアップTaalasを買収し、Nvidiaとの競争が推論分野へと拡大しています。
推論はAIが質問に答える毎日の処理であり、速度や消費電力が重要な競争要素となっており、Taalasの技術は従来比で大幅なコスト削減と電力削減を実現するとされています。
AMDはこれ以外にも複数の推論関連企業を買収しており、Nvidia対抗の動きが活発化しています。
何が起きたか
AMDは8月6日、AI推論(AIが質問に答える処理)に特化したチップスタートアップのTaalasを買収することを発表しました。買収金額は非開示です。AMDはTaalasの技術をAMD Instinct GPU(画像処理用演算チップ)と組み合わせたシステムとして統合する計画です。
なぜ重要か
推論は日々のAI利用時に発生する処理であり、AIアシスタントや自動プログラミングツールが数十億件のクエリを処理する中で、速度・効率・消費電力が競争上の重要要素になりつつあります。Nvidiaはこれまでモデル訓練では圧倒的ですが、推論分野では中央処理装置やカスタムチップからの競争が増しており、AMDのこの買収はNvidiaの推論市場での優位性に対する直接的な挑戦とみられます。
注目点
Taalasの技術は、Llama 3.1 8Bを実行する際に1ユーザーあたり毎秒約17,000トークン(テキスト処理の単位)を処理し、従来比で20分の1の建設コスト、10分の1の消費電力で実現可能とされています。AMDは過去数ヶ月でMK1(11月)、MEXT(6月)、FastFlowLMの買収・統合も行っており、推論能力の強化を加速させています。
AMDは8月6日、推論特化チップのスタートアップTaalasの買収を発表しました。買収金額は非開示ですが、この動きはNvidiaに対する競争を推論分野へと拡大する戦略的な一手です。AMDはTaalasの技術をAMD Instinct GPU(画像処理用演算チップ)と組み合わせ、異なるコンポーネントと機能を統合したシステムレベルのソリューションを開発する計画です。同社のArtificial Intelligence Group上級副社長であるVamsi Boppanaは「AMDはすべてのAIワークロードに対して適切な演算ソリューションをお客様に提供する柔軟性を持つフルスタックAIプラットフォームを構築している」とコメントしています。
Taalasの技術は推論処理において大きな性能上の利点を提供するとみられます。同社のHC1デモンストレーターはLlama 3.1 8Bを実行する際に1ユーザーあたり毎秒約17,000トークン(テキスト処理の単位)の処理速度を達成し、高度なHBMメモリ、高度なパッケージング、液体冷却を避けることで、従来の推論システムと比べて建設コストを20分の1、消費電力を10分の1に削減できると主張しています。
この買収はAMDの推論分野への戦略的な投資の一部です。同社は過去数ヶ月でAI推論を専門とするソフトウェアスタートアップのMK1を11月に買収し、6月にはMEXT、7月にはFastFlowLMを統合しています。これらの一連の買収によって、AMDはNvidiaなどの大手企業との推論能力の競争に対抗しようとしています。
この動きの背景には、推論分野における競争の激化があります。推論とはAIモデルが実際に利用される際の処理、つまり質問に答える処理を指します。AIアシスタント、自動コーディング機能、その他類似のアプリケーションが数十億件のクエリを処理する中で、レイテンシ(応答時間)、スループット(処理量)、消費電力効率といった要素がますます重要になっています。Nvidiaはこれまでモデル訓練の分野では支配的でしたが、推論分野ではCPUやカスタムプロセッサからの競争に直面しており、より統合されたシステムを提供する必要が生じています。これに対抗するため、Nvidiaは先ごろ高性能AIチップ設計企業のGroqとの200億ドルの提携を発表し、推論技術と人材を確保しています。
AMDの推論チップ分野への集中的な投資は、AI市場の競争図式の変化を反映しています。Nvidiaはこれまでモデル訓練(大規模データでAIを学習させる処理)では圧倒的な支配力を保っていますが、推論分野ではCPU(汎用演算チップ)やカスタムチップからの競争が増しており、単独のGPU製品では対抗しきれない状況が生まれています。AMDはこうした市場の隙間を認識し、Taalasに加えてMK1、MEXT、FastFlowLMといった推論関連企業を短期間で次々と買収することで、「フルスタックAIプラットフォーム」の構築を目指しているとみられます。Nvidiaも先行してGroqとの200億ドルの提携で推論技術を補強しており、両者の推論市場での競争激化が予想されます。
AIが要約して、あなたの選んだトピックだけを1日1通。LINE・Email・Slackで届きます。
登録無料・30秒で完了・いつでも解除できます
この記事についてわからないことをAIに質問できます。Q&Aはこのページに公開され、他の読者も読めます。
AIニュースの要点を毎朝1分で。
無料で登録