AI学習を拒否する共通規格を主要各社が採用へ

この発表は、出版社がAIクローラーによる継続的なサイト巡回と、AIモデルへのコンテンツ取り込みに直面する中で出された。一部の団体は別の道も試している。Really Simple Licensing（RSL）標準では、サイトを訪れるクローラーに課金できる。CloudflareはAIクローラーをデフォルトでブロックする。共通トークンは異なるアプローチで、企業ごとの設定を、複数のプロバイダーが読むrobots.txt内の1つのシグナルに置き換えることを目指す。4社は、共通トークンを検知した場合、自社のAIクローラーによるサイトへのアクセスを制限するとしている。Metaのコミュニケーション責任者Andy Stone氏は新設定への支持を示したが、同社が従うかは明言せず、複数プロバイダーに意向を一度に伝える共通シグナルは重要な一歩だと述べるにとどめた。Microsoftはさらに、出版社がAI学習やAIグラウンディング（ハルシネーションを減らすためモデルを検証済みの情報源に誘導する処理）を拒否できる詳細な設定を提供すると付け加えた。一方でサイトは引き続きBingの検索結果に表示されるとしている。Googleは以前、検索での可視性に影響を与えずに同様の設定を導入した。対応時期は異なる。Anthropicはすでにシグナルを採用済みで、GoogleとMicrosoftは来年の対応を予定し、OpenAIは「数カ月以内」に導入するとしている。