AI開発者、長文処理で新境地 1M トークンの推論に対応

提供いただいたテキストは、Anthropic のニュース発表というより、個人ブログ投稿として執筆されています。著者は AI と言語モデルの歴史的意義を、印刷術の登場との類比で論じており、単なる生産手段の効率化だけでなく、人類が情報を代々伝承してきた本質的な営みにおける進化として AI を位置付けています。

ブログ内で述べられているように、「損失（loss）、能力（capability）、タスク行動がデータ、モデルサイズ、計算量とともにスケールする」というスケーリング則が現代言語モデルの経験的教訓とされており、この原理に基づいて Claude の 1M トークン対応が実現したとみられます。著者は「十分な容量をもつモデルにデータを大量に通せば、創造性と知性に接近する確率分布が得られる」と述べ、人間的思考と AI の関係を機能的同等性の観点から解説しています。