ChatGPT前の人間執筆をAI検出ツールが誤判定

2026年春、ある執筆者とAIスタートアップ創業者は、AI検出ツールが彼女自身の執筆をAI生成テキストと区別できるかテストすることにした。彼女は2十年にわたる8つの構成を選択した：4つがChatGPT前（2019年の個人的なセットアップガイド、2020年のデジタルプライバシーに関するM.S.論文、2019年前のソーシャルメディア情報操作エッセイ、2020年の大学院入試エッセイ）で、4つが現代（ビッグバンの質量に関する科学中編、ヴァンパイア小説の複数章、彼女のAIスタートアップに関するエッセイ、精神的執筆）。その後、各々を11の検出ツール：Originality、Ace、Humalingo、ZeroGPT、Grammarly、GPTZero、Getsolved、Quillbot、Pangram、CopyLeaks、WinstonAI を通した。

結果は検出ツールの信頼性にとって悲劇的だった。彼女の2019年セットアップガイド――検証済みの人間執筆、現在のAI言説前に作成――は Getsolved では5%人間と判定され、Humalingo では16%、Ace では16%だった。だが6つの他のツールは100%人間と評価した。これは周辺での不一致ではなく、同じテキストで95ポイントの差だ。彼女の2020年大学院エッセイは15%人間と判定；彼女の2019年前のソーシャルメディアエッセイは12%。3つの検出ツール（Ace、Humalingo、Getsolved）は統制グループに完全に失敗し、8作品すべてをほぼ全面的にAIと評価し、ChatGPT前のすべてを含んだ。

皮肉は彼女が最もAI支援が多い作品をテストした時にさらに深まった：物理学とヴァンパイアについての連載小説で、Claude は連続性部門として機能し、キャラクターシート、年表、リサーチを維持する。この作品――機械支援に最も近い――11個中7つの検出ツールで99～100%人間と判定され、8番目では91%、試験した8つのテキスト中で最も高い平均人間スコアを達成した。彼女のLLM前アーカイブをさえ上回った。Getsolved はそれを60～73%人間と評価しながら、彼女のLLM前執筆を5～15%と評価。1つの検出ツールは真実を完全に逆転させた。

執筆者は、検出ツールが著者性ではなく予測可能性を測定していると主張する。高い語彙密度と強い構文的一貫性を持つ散文は低温言語モデルの出力をミラーリングし――科学と技術執筆の特徴であり、AI起源の兆候ではない。彼女のヴァンパイア小説は予測不可能な物語的選択のために成功する（重力をギャングボスとして、Silvio Dante という名前のキャラクターから舞台指示を受ける；強い核力を誘惑者として人格化）。検出ツールの訓練分布外にある。ツールは2004年の彼女の Blogger 時代から培われた彼女の特有の声を、時代にかかわらず疑わしいと判定する。

一方、主要な科学フィクション出版物はAI検出方針を採択している。Clarkesworld（2026年7月）は、AIツールで作成、開発、または支援された投稿は考慮しないと発表した。Asimov's Science Fiction（2026年7月）は同様の方針をより高いリスクで発行した：AI支援作品の投稿試行は永久追放をもたらす可能性がある。執筆者は皮肉を指摘する――Asimov's の Foundation 小説は数千年にわたる舞台で、至る所にAIと先進技術を描写している。彼女は、学生を告発したり投稿を拒否したり評判を傷つけるためにこれらのツールを使用している機関は「複数議席に着くべき」と主張し、11個の検出ツールが互いに同意し彼女の統制グループに合格した場合のみ気が変わると誓約する。彼らは変わっていない。

根本的な問題は、AI検出ツールが著者性を測定していないということだ。彼らは予測可能性と文体的一貫性を測定している。この執筆者の統制実験は基本的な欠陥を露呈させる：3つの検出ツール（Ace、Humalingo、Getsolved）は彼女の人間執筆8点すべてを、ChatGPT前の2004～2020年のテキスト含め、ほぼ全面的にAI生成と判定した。これは周辺的な不一致ではなく、カテゴリー的な失敗だ。同じ冬の日を5度と100度と読む2本の温度計は、どちらも温度を測定していない――一方は壊れて使い物にならない。

検出ツールは彼女の執筆の構造的特徴のために判定する傾向がある：高い語彙密度、強い構文的一貫性、情報精度。これらは彼女の意図的で体系思考的な声の特徴であり、低温でサンプリングする言語モデルの出力が偶然ミラーリングされている。低温サンプリングは著者性ではなく、多くの技術的メカニズムの1つに過ぎない。Claude がファイリング、連続性、リサーチを処理する彼女の最もAI支援が多い作品は、ほとんどの検出ツールで彼女のLLM前アーカイブより人間らしいと判定された、なぜなら予測不可能な物語的選択（重力をギャングボスとして、強い核力を誘惑者として）が含まれており、検出ツールの訓練分布外だからだ。

賭け金は具体的で即座だ：Clarkesworld と Asimov's Science Fiction はいずれもAI支援作品を拒否し、投稿試行に永久追放がある。教師はこれらのツールを使って学生を詐欺で告発している。編集者と出版社は投稿を拒否している。執筆者の証拠は、これらの機関が互いに同意できず、テクノロジー存在前に作成された人間執筆を体系的に誤分類するツールを配置していることを示唆している。

まだコメントがありません。最初のコメントを投稿しましょう！