AIToday
大規模言語モデルオープンソースAIHacker News掲載日時: 2026年5月5日 10:001分で読める

SMILE Serve — JVM上で動作する本番環境対応の推論サーバーが、Classic ML、ONNX、LLMチャットの3つの機能を統合

LINEで送る
SMILE Serve — JVM上で動作する本番環境対応の推論サーバーが、Classic ML、ONNX、LLMチャットの3つの機能を統合

3つのポイント

  1. SMILE Serveは、Quarkusをベースに構築された本番環境対応の推論サーバー(推論=AIが答えを導き出す処理)で、3つの異なる推論機能をJVM上で提供する

  2. Classic ML用の`/api/v1/models`エンドポイント(`.sml`形式のSMILEモデル対応)、ONNX Runtime用の`/api/v1/onnx`(`.onnx`フォーマット対応)、LLMチャット用の`/api/v1/chat`(Llama 3チャット完成対応)の3つのAPIを備える

この記事についてAIに質問する →

LINEで送る

「大規模言語モデル」の最新ニュースを、毎朝7時にお届けします

たとえば、いま届くならこの3本です

  • DataAgentが1000万ドル調達、Kubernetes障害を自動修復SiliconANGLE AI · 4時間前
  • SK海力士定制HBM推升推理性能5.15倍DIGITIMES Asia · 4時間前
  • エヌビディア決算、統合回避戦略で退屈な内容にStratechery (Ben Thompson) · 4時間前

AIが要約して、あなたの選んだトピックだけを1日1通。LINE・Email・Slackで届きます。

登録無料・30秒で完了・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。Q&Aはこのページに公開され、他の読者も読めます。

関連記事

次の記事へOpenAI共同創業者Greg Brockmanが法廷で$30 billion規模の株式保有を擁護、Muskとの訴訟で「血、汗、涙」を投じたと主張