AIToday
大規模言語モデルHacker News掲載日時: 2026年8月5日 13:01

AI生成短編、人間の作品より高評価 研究結果

LINEで送る
AI生成短編、人間の作品より高評価 研究結果

3つのポイント

  1. 何が起きたか

    学術誌『Judgment and Decision Making』に掲載された研究で、1,682人の成人が人間による短編3編とChatGPTによる短編3編を読み、吸引力と品質を評価しました。AI生成の短編を読んだ参加者は、人間が書いた短編を読んだ参加者よりも、その短編をより吸引力があり、品質が高いと評価しました。

  2. なぜ重要か

    AIシステムは既に人間と同等かそれ以上の品質の短編を生成できることを示唆しており、AIの能力に対する見方の更新が必要とみられます。一方、参加者が人間による作品と告げられた短編には高評価を与えており、AI生成と知ると評価が変わることも示唆されています。

  3. 注目点

    さらに2つの実験で905人の成人が2編のストーリーのうちどちらが人間でどちらがAIによるものか当てるよう求められ、一方の実験では約40%の正答率(偶然より悪い)、もう一方では52%の正答率となり、参加者は人間とAI生成の区別ができていないことが示されました。

わからないところ、AIに聞けます

質問と回答はこのページに公開されます。

こういう要約が、毎朝あなたのメールに届きます。

背景と解説

この研究は、AIが生成したテキストと人間が執筆したテキストの品質評価が、AIの実際の性能と参加者の認識や態度に複雑に影響されることを示しています。参加者は客観的にはAI生成短編をより高く評価していながらも、作者が人間であると告げられた場合により高い評価を与えるという矛盾が見られました。これは「真正性への欲求」に関連している可能性があると研究者は指摘しています。一方、AIシステムへの肯定的な態度を持つ参加者は、ChatGPTが生成したと告げられた短編に対してより高い評価を与えており、参加者の事前の信念がAI生成テキストの評価に大きく影響することが示唆されています。研究者らは、AIの執筆スタイルは人間の著者の独特なスタイルを学習できるのと同様に、練習を通じて認識することが可能だと述べています。

よくある質問
この研究の参加者は何をしましたか?
1,682人の成人が6編の短編(人間執筆3編、ChatGPT生成3編)のうち1編を読み、吸引力と品質を5段階で評価しました。別の905人の参加者は2編を読み、どちらが人間でどちらがAIによるものかを当てるよう求められました。
参加者はAI生成と人間執筆の短編を区別できましたか?
いいえ。2つの実験で約40%と52%の正答率となり、著者らは「参加者がAI生成と人間執筆の短編を区別できたという一般的な証拠はない」と述べています。
参加者は実際にどちらの短編をより高く評価しましたか?
実際に読んだAI生成短編は人間執筆短編よりも吸引力があり品質が高いと評価されました。ただし、人間が書いたと告げられた短編には、AI生成と告げられた短編よりも高い評価が与えられました。
LINEで送る

あなたの仕事に関係するAIニュースを、毎朝お届けします。

業界と使っているAIツールを選ぶと、仕事に関係するニュースが毎朝届きます。

登録無料・Googleアカウントなら30秒・いつでも解除できますAITodayについて →

AIに質問

この記事についてわからないことをAIに質問できます。AIはこの記事・AIToday の過去記事・Wikipedia を読み、出典を付けて答えます。Q&Aはこのページに公開され、他の読者も読めます。

質問と回答はこのページに公開されます。

このようなAIの動きを、御社の業界・競合に合わせて毎日届ける法人プランもあります → 詳しく見る

関連記事

マイクロソフトがAIエージェントで攻撃対抗サービス提供開始

Microsoft Ignite 2026でマイクロソフトは赤・青・緑チームのエージェントを組み合わせ攻撃模擬・検知調査・脆弱性修正を行うMicrosoft Perceptionの一般提供を発表した

NEWPublickey3時間前

Windows Server 2028がパブリックプレビュー公開

Microsoft Ignite 2026でWindows Server 2028のパブリックプレビューが公開され、Microsoft Foundry、Windows ML、vLLM、Llama.cppによるAI推論ホス…

NEWPublickey3時間前

AUMOVIOがLLMの唯一の経路をDatabricksに統一

AUMOVIOはDatabricks Unity GatewayをLLMへの唯一の経路に採用

NEWDatabricks AI Blog3時間前

CADMAGEDDON、5ベンチマークで最先端CADモデル超え

CADMAGEDDONはBenchCADの64³ボクセルIoUで、1000部品のサブセットにおいて0.991を記録し、Claude Sonnet 5.5の0.963、Claude Opus 5.5の0.962、GPT-6…

NEWAI Weekly3時間前

MIT Technology ReviewのAI指数、AIは遍在

MIT Technology ReviewのAI誇大広告指数はAIの広がりを示し、GoogleのAI Overviewsが広告収入で数十億ドルを失わせたことやAI支援のサイバー攻撃を挙げた

NEWMIT Technology Review AI3時間前

Thomas Nagel、AI意識説を「馬鹿げている」と一蹴

哲学者トーマス・ナゲル氏はバーグルエン賞受賞後のインタビューで、大規模言語モデルが意識を持つ可能性を真剣に受け止めるのは「馬鹿げている」と述べ、AnthropicのClaudeへのアプローチを「犯罪的」と呼んだ

NEWWIRED AI3時間前
次の記事へホワイトハウスがAIサイバーセキュリティ枠組みを非公開に