DeepMindのAI共同研究者、実験と論文執筆に対応

Co-Scientistが仮説生成器から実験室連携パートナーへと拡張されたことは、自律的な科学研究への一歩となる。仮説導出、実験計画、コード実行、論文執筆という閉ループのワークフローは、AIによる捏造問題への対処を目指している。既存システムでは捏造率が80〜100%と報告されていたが、Co-Scientistの信頼性モジュールは二重盲検試験で主要結果の捏造を4%に抑えた。ただし、選択的報告などの残存課題はある。

3分野での検証は、人間のガイド付き合成から完全自律のAI設計まで、自律性の向上を示している。しかしコンピューター科学の実験では、ベンチマーク性能と臨床的関連性の間に乖離が明らかになった。ヘルスベンチマークで6つの最先端モデルを上回ったものの、3人の医師による評価では、害の軽減においてのみ有意な優位性を示した。この乖離は、自動化されたベンチマークが実際に何を測定しているのかという疑問を提起する。

OpenAIは今秋、研究用のAIエージェントを発表する予定で、自動研究への期待の高まりがうかがえる。しかし、これらのシステムが新たな知識を発見できるのか、それとも訓練データ内の明示的な内容を再現するだけなのかという議論は続いている。研究者らは、AIが科学の物理的現実を扱えるようになるまでには、なお長い道のりがあると認めている。