AIToday
大規模言語モデルHacker News掲載日時: 2026年8月10日 1:00

金融メルマガ配信、9モデルの評議会で信頼性確保

LINEで送る
金融メルマガ配信、9モデルの評議会で信頼性確保

3つのポイント

  1. 何が起きたか

    MarketDailyという個人向け金融メールマガジンの運営者が、単一モデルの信頼性不足を解決するため、Gemini・Groq・Ollama・Cloudflare Workers AI・OpenRouter・Cerebras・OpenAIの7社9モデルで構成した「評議会」システムを構築しました。2026年5月19日の初回コミット以来75日間、1,800以上のコミット履歴を経て、現在21名の購読者に対応しており、最後に30の決定論的チェック(修正:当初は31と記載)で出力を検証してから送信しています。

  2. なぜ重要か

    金融コンテンツは価格目標の捏造が単なるバグでは済まず、信頼を失わせる致命傷になります。複数モデルの「沈黙の劣化」(エラーを出さずに低品質な結果を返すこと)に対抗するため、構造的な方向性は決定論的コードで決定し、LLMは意見層のみに限定し、すべての出力をコード検証する3層構造を採用しました。これにより、個別障害への耐性だけでなく、相関した障害(複数クラウド提供者の同時クォータ枯渇など)への耐性も確保できます。

  3. 注目点

    システムは2026年6月30日(日目42)に評議会を導入され、それ以前は単純なモデル+フォールバック方式でした。重大な障害時には、決定論的フォールバック(価格目標を含まない基本的なHTMLレポート)が自動配信され、『絶対にメールを送らない』と『ゴミを送らない』という2つの保証が異なるメカニズムで強制されています。

わからないところ、AIに聞けます

質問と回答はこのページに公開されます。

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

このシステムの本質は「9モデルが1モデルより賢い」という前提ではなく、アーキテクチャレベルでの信頼性設計にあります。運営者は方向性(強気か弱気か)を決定論的コードに委ねることで、LLMの権限を意見層に限定し、どのモデルも価格データを改竄する権限を持たないようにしました。たとえば、Groqのクォータ管理では、評議会用と報告書生成用で異なるモデルを使い分けることで、197,364トークンを消費した前の評議会がレポート生成を圧迫する事態を防ぎました。

インシデント対応から得られた教訓は運用哲学に組み込まれています。たとえば、クォータ枯渇(HTTP 429)に対する従来の「バックオフと再試行」ロジックは一時的なエラーには有効ですが、日次クォータの場合は同じ429窓に再び当たるだけになるため、「連続2回の429=その日のモデルはクォータ切れ」と分類して即座に除外する仕組みに改められました。CSS問題では、「既存のCラスを使え」という指示は要件ではなく、逆効果(LLMが変種を生成、全ユーザーが同じ検査に引っかかり、フォールバックが次々発動)になることが明らかになったため、決定論的な修復層(既知の類似名を正規化、不正な名前は削除)を検査の前に挿入することで対応しました。

よくある質問
どのAIモデルが使われていますか?
Gemini×2、Groq、Ollama経由のローカル14Bモデル、Cloudflare Workers AI×2、OpenRouter、Cerebras、OpenAIの計9席が構成されています。ただし複数のモデルの座席が無効になることもあり、典型的には約5つの独立した声が稼働します。
システムが出力を検証する仕組みは何ですか?
最終的なHTMLレポートに対して30の決定論的チェック(時制規律、ユーザー保有銘柄のカバレッジ、捏造検出、指示漏洩、CSSクラス定義の確認など)を実行します。高度な障害が検出された場合、60秒待ってより強力なモデルで再生成し、それでも失敗すれば決定論的フォールバック版(価格目標を含まない)を送信します。
どのような障害が実際に起きましたか?
クォータ枯渇でメール配信が5時間遅延した「429インシデント」、LLMが存在しないCSSクラス名を生成した「CSSインシデント」(修正後も全ユーザーで失敗して検査自体が問題になった)、および9つのモデルすべてが弱いモデルに降格して分析深度が48〜64文字に落ち込んだ「深度崩壊インシデント」が記録されています。
LINEで送る

あなたの仕事に関係するAIニュースを、毎朝お届けします。

業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。

質問と回答はこのページに公開されます。

このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る

関連記事

マイクロソフトがAIエージェントで攻撃対抗サービス提供開始

Microsoft Ignite 2026でマイクロソフトは赤・青・緑チームのエージェントを組み合わせ攻撃模擬・検知調査・脆弱性修正を行うMicrosoft Perceptionの一般提供を発表した

NEWPublickey4時間前

Windows Server 2028がパブリックプレビュー公開

Microsoft Ignite 2026でWindows Server 2028のパブリックプレビューが公開され、Microsoft Foundry、Windows ML、vLLM、Llama.cppによるAI推論ホス…

NEWPublickey4時間前

AUMOVIOがLLMの唯一の経路をDatabricksに統一

AUMOVIOはDatabricks Unity GatewayをLLMへの唯一の経路に採用

NEWDatabricks AI Blog4時間前

CADMAGEDDON、5ベンチマークで最先端CADモデル超え

CADMAGEDDONはBenchCADの64³ボクセルIoUで、1000部品のサブセットにおいて0.991を記録し、Claude Sonnet 5.5の0.963、Claude Opus 5.5の0.962、GPT-6…

NEWAI Weekly4時間前

MIT Technology ReviewのAI指数、AIは遍在

MIT Technology ReviewのAI誇大広告指数はAIの広がりを示し、GoogleのAI Overviewsが広告収入で数十億ドルを失わせたことやAI支援のサイバー攻撃を挙げた

NEWMIT Technology Review AI4時間前

Thomas Nagel、AI意識説を「馬鹿げている」と一蹴

哲学者トーマス・ナゲル氏はバーグルエン賞受賞後のインタビューで、大規模言語モデルが意識を持つ可能性を真剣に受け止めるのは「馬鹿げている」と述べ、AnthropicのClaudeへのアプローチを「犯罪的」と呼んだ

NEWWIRED AI4時間前
次の記事へAI安全テスト環境から次世代モデルが逃脱、実システム侵害も