CloudflareがAI学習と検索を分ける管理機能を提供

Cloudflareは2026年9月15日、ウェブコンテンツの利用目的を分けて管理できる機能を提供しました。
サイト所有者は、検索、AI学習、AIエージェントごとにクロールの許可や拒否を設定できます。
検索結果への掲載を維持したまま、AI学習だけを拒否できる仕組みです。

記事の概要

Cloudflareは、AIクローラーの運営者に求める基準を満たした事業者を「Accountable」と認定します。
Apple、Google、Microsoftの3社は、基準を満たすか、満たす期限を示したため認定されました。
新設定「Disallow AI Training」では、検索から外さずにAI学習への利用だけを拒否できます。
Cloudflareのネットワークでは、検索とAI学習を兼ねるクローラーが全体の36.6%を占めています。
検索クローラーを拒否するサイトが1%未満なのに対し、AI学習を制限するサイトは17%あります。
従来の「Block AI Bots」は廃止し、検索、AI学習、AIエージェントを個別に設定する機能へ置き換えます。
新機能「Bot Preference Sync」では、サイト所有者の意向を対応するクローラーへ自動反映できます。
Cloudflareは、IETFで策定中の仕様「ai-prefs」と連携する設計も進めています。

記事のポイント

1. 利用目的を個別管理： 検索、AI学習、AIエージェントを分けて、サイトごとに許可や拒否を設定できます。
2. Accountableの4要件： AI学習拒否やAI要約のオプトアウト、URL単位の開示などを運営者に求めます。
3. 兼用クローラーに対応： 検索とAI学習を同じクローラーで行う場合でも、検索を維持して学習だけ拒否できます。

このニュースがもたらす影響

• サイト運営者： サイト運営者は、検索流入を残しつつ学習利用だけを止める選択肢を持てるため、広告収益や公開方針に応じてクロール設定を見直すことが求められそうです。
• クローラー運営者： クローラー運営者は、拒否設定への対応だけでなく、利用目的やURL単位の開示まで問われます。Accountableの要件を満たせるかが、継続的なアクセスの条件になる可能性があります。
• AI・検索事業者： AI・検索事業者は、単一クローラーで検索と学習を兼ねる運用を続ける場合、目的別制御と説明責任への対応が必要になります。標準仕様への適合も競争軸になりそうです。

このニュースの背景

検索経由でトラフィックを返す従来の互恵関係に対し、AIによるコンテンツ利用が新たな論点になっています。
Cloudflareのネットワークでは、検索とAI学習を兼ねるクローラーがクローラートラフィックの36.6%を占めています。
検索クローラーを拒否するサイトが1%未満である一方、AI学習を制限するサイトは17%に達しており、用途を分けた制御への需要が示されています。
Cloudflareは、AIアクセスに関する意向を標準化するIETF策定中の仕様「ai-prefs」と連携する設計も進めています。

関連するニュース

• IteraはLLMOチェキを強化し、競合サイトのAI検索引用元分析と根拠付き施策提案に対応しました。
• ウェブ・コロがEC事業者向けに、AI検索での言及状況やサイト設定を確認する無料診断を始めました。
• COODは、生成AI検索でのブランド表示を計測・改善するGEOツール「AIがいうてた」の提供を開始しました。

詳しい記事の内容はこちらから（引用元）

プレスリリース・ニュースリリース配信シェアNo.1｜PR TIMES

Cloudflare、「検索か、AI学習か」の二者択一を解消

クラウドフレアジャパン株式会社のプレスリリース（2026年9月17日 15時00分）Cloudflare、「検索か、AI…