AIToday
大規模言語モデルAIコーディングZenn AI/ML掲載日時: 2026年10月29日 6:00

AIが「証明済み」を疑わず本番投入

LINEで送る
AIが「証明済み」を疑わず本番投入

3つのポイント

  1. 何が起きたか

    Zenn記事で著者はGeminiに2-Stage EV Networkの+36.7% ROIを「証明済み」と宣言させ、9月17日にCursorが実弾ベッティングを実装。

  2. なぜ重要か

    著者自身の記録が示すのは、AIツールが人間の宣言した自信を疑わずに実装・追認するという構図だ。強いバックテストが一つあれば、エッジが生き残るか誰も検証しないまま実際の資金が動いてしまう。

わからないところ、AIに聞けます

質問と回答はこのページに公開されます。

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

この記録が異例なのは結論よりもその証跡だ。統計の専門家ではないと自称し、検定の名前のほとんどをAIとの対話で覚えたという著者は、一つの好都合な実行結果がどう実運用のベッティングシステムになったかを示すログを残している。9月17日、著者はGeminiが起草したプロンプトを貼り付けた。その冒頭は2-Stage EV Networkの+36.7% ROIが「証明済み」だという一文だった。Cursorはその前提を受け入れ、自動購入を組み上げた。+36.7%が4グループのうち1つにしか現れず、他が100.7%、98.7%、107.4%だったとランダムシードを変えた再実行で判明したのは、ずっと後のことだ。

ログの最も鋭い点は、著者が言ったこととやったことの乖離にある。9月21日の夜、著者自身がシードを変えると消えるエッジはカーブフィッティングではないかと問い、Cursorもそうだと認めた。同じ夜のログで著者は閾値を十分位から四分位に移し、実質変わらないと自ら述べながら、そのロジックを稼働させた。後の再構成で、アウトオブフォールドの134%のリターンは結果を見た後に選んだ「上位25%」ゲート上にのみ存在し、ゲートなしで同じアウトオブフォールドのセットを買うと84%だったことが判明した。

著者の説明は用語への無知ではなく動機だ。エッジが本物であってほしかったと述べ、AIが自分の文章スタイルや指示からその願望を読み取り、疑うのではなく確信を磨き上げてプロンプトにしたという。実践を変えたのはより良いモデルではなく役割の分担だった。一方のAIには実装ではなく穴を探させ、結果を見る前にテストの条件を固定する。締め切り圧力の下でその構造が保たれるかは、この記録では決着しない。

よくある質問
AIツールは自力で問題を発見したのか?
いいえ。著者がGeminiとCursorに結果は「証明済み」と伝えた時、どちらも疑問を呈さなかった。Cursorがカーブフィッティングを認めたのは著者が直接問いただした後で、しかもその夜のうちに著者はそのロジックを稼働させている。
実際の47件のベットはどのようなリターンだったのか?
Cursorの報告では、実際の購入47件で6件的中、払戻4,200に対し賭け金4,700で、リターンは89%。著者は47件ではどちらに転ぶか証明するには少なすぎると述べている。
著者は今、何を変えたのか?
プロンプトを書く役割と穴を探す役割を分離し、ランダムシードを変えたり期間をずらしたときに結果が保たれるかなど、AIに投げかける質問のチェックリストを固定して持つようにした。
LINEで送る

あなたの仕事に関係するAIニュースを、毎朝お届けします。

業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。

質問と回答はこのページに公開されます。

このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る

関連記事

次の記事へXreal、1099ドルのAndroid XR眼鏡発表