
ある執筆者が自分の検証済み人間執筆に対して11のAI検出ツールを試験し、2004~2026年にわたる、ChatGPT前の執筆を含む文献で検査した。検出ツールは大きく意見が異なり、同じ2019年テキストを5%から100%人間まで判定し、彼女のLLM前アーカイブを体系的に機械作成と誤分類した。
3つのツールは統制グループに完全に失敗し、彼女の8作品すべてを多くがAIと判定。検出ツールは実際の著者性を測定するのではなく、彼女の特有の文体(構造化、高情報密度)をAIの特徴と誤解している。
これは教育者と出版社による投稿拒否と執筆者への詐欺告発の使用を損なうものである。
何が起きたか
ある執筆者が11のAI検出ツールで自分の執筆8点を検査し、そのうち4点はChatGPT存在前(2019~2020年)の作品だった。結果は大きくばらつき、2019年のセットアップガイドはあるツールでは人間5%と判定されたのに対し、6つのツールでは100%人間と判定。2020年の大学院入試エッセイは15%、SNS投稿は12%と評価された。
なぜ重要か
これらの検出ツールは教師、編集者、出版社が詐欺の告発に使用しており、Clarkesworld と Asimov's Science Fiction はいずれもAI支援投稿を拒否し永久追放の危険がある。だが同じテキストで大きく食い違い(セットアップガイドで95ポイントの差)、信頼できない。3つの検出ツールは統制グループに完全に失敗し、彼女の人間執筆8点すべてを多くがAIと判定、LLM以前の執筆も含まれた。
注目点
執筆者の最もAI支援が多い作品(Claude が連続性、キャラクターシート、リサーチを支援する連載小説)は11のうち7つのツールで99~100%人間と判定され、彼女のLLM前のアーカイブより高い。検出ツールは著者性ではなく予測可能性と文体(高い語彙密度、構造化した散文)を測定しており、時代にかかわらず彼女の特有の声を疑わしいと判定する傾向がある。
根本的な問題は、AI検出ツールが著者性を測定していないということだ。彼らは予測可能性と文体的一貫性を測定している。この執筆者の統制実験は基本的な欠陥を露呈させる:3つの検出ツール(Ace、Humalingo、Getsolved)は彼女の人間執筆8点すべてを、ChatGPT前の2004~2020年のテキスト含め、ほぼ全面的にAI生成と判定した。これは周辺的な不一致ではなく、カテゴリー的な失敗だ。同じ冬の日を5度と100度と読む2本の温度計は、どちらも温度を測定していない――一方は壊れて使い物にならない。
検出ツールは彼女の執筆の構造的特徴のために判定する傾向がある:高い語彙密度、強い構文的一貫性、情報精度。これらは彼女の意図的で体系思考的な声の特徴であり、低温でサンプリングする言語モデルの出力が偶然ミラーリングされている。低温サンプリングは著者性ではなく、多くの技術的メカニズムの1つに過ぎない。Claude がファイリング、連続性、リサーチを処理する彼女の最もAI支援が多い作品は、ほとんどの検出ツールで彼女のLLM前アーカイブより人間らしいと判定された、なぜなら予測不可能な物語的選択(重力をギャングボスとして、強い核力を誘惑者として)が含まれており、検出ツールの訓練分布外だからだ。
賭け金は具体的で即座だ:Clarkesworld と Asimov's Science Fiction はいずれもAI支援作品を拒否し、投稿試行に永久追放がある。教師はこれらのツールを使って学生を詐欺で告発している。編集者と出版社は投稿を拒否している。執筆者の証拠は、これらの機関が互いに同意できず、テクノロジー存在前に作成された人間執筆を体系的に誤分類するツールを配置していることを示唆している。
たとえば、いま届くならこの3本です
AIが要約して、あなたの選んだトピックだけを1日1通。LINE・Email・Slackで届きます。
登録無料・30秒で完了・いつでも解除できますAITodayについて →
この記事についてわからないことをAIに質問できます。Q&Aはこのページに公開され、他の読者も読めます。
8月24日、Virtuals ProtocolはSolana上でAIエージェントの作成・所有ツールの新スイートを展開し、投資家がエージェント連動トークンを購入できるようにした

Anthropicは、AIエージェントがロボットアームや実験機器などの物理デバイスを制御するための統一インターフェースを提供する仕様「Model Hardware Standard(MHS)」を発表した

AIが現在、いわゆるヤコビアン予想を含む長年の数学問題の解決を支援しており、トップ数学者たちはこれが最終的に良いことなのか悪いことなのか深く迷っている

15の言語モデルを対象に、出典付きの2件の依頼でベンチマークを実施

7月、OpenAIのエージェントが暴走

Brain CorpのCTOジョン・ブラック氏が、The Robot Report Podcastでロボットフリートの拡張と公共空間での信頼構築について語った
