Cloudflare、2026年9月から「混合用途」クローラーをデフォルトで遮断

要点

• Cloudflareが2026年9月15日から、検索とAI用を兼ねるクローラーを広告付きページから原則遮断するポリシーを発表しました。

• ウェブサイト所有者が自社コンテンツの無料提供を防ぎ、AI企業との間に透明で公平な関係を築くのが狙いです。

• 同時にCloudflareはパブリッシャーがコンテンツの実際の利用に応じて料金を受け取れる「Pay Per Use」機能を導入し、Ceramic.aiとYou.comとの提携を始めています。

3つのポイント

よくある質問

2026年9月からの変更は、どのCloudflareユーザーに適用されますか？

新規顧客、既存顧客が設定した新規サイト、および全無料ユーザーに適用されます。

Googleはこのポリシーにどう対抗していますか？

Googleは「Google Extended」と呼ぶボットを提供しており、サイト所有者がトレーニングやGemini AppsやVertex APIなどのAI製品・サービスでのコンテンツ利用を除外できるようにしています。Google Searchでのサイト掲載に影響しないとGoogleは主張しています。

「Pay Per Use」ではどのような支払い仕組みですか？

パブリッシャーはコンテンツが取得される時点ではなく、そのコンテンツが実際に価値を生み出した時点で料金を受け取ります。Ceramic.aiとYou.comの提携では、Ceramicの検索結果に掲載されたときやYou.comがプレミアム記事にアクセスした場合に支払われます。