Uravationは、日経平均株価の構成銘柄225社を対象に、AIクローラーへの対応状況を調査しました。
llms.txtを設置していた企業は、応答のあった180社のうち9社でした。
robots.txtでAIクローラーを名指ししていた企業も、応答のあった184社のうち9社にとどまりました。
ChatGPT・Claude・Perplexityの検索用ボットを全面拒否した企業はありませんでした。
記事の概要
調査は2026年10月23日に、225社の公式サイトを対象として実施されました。
各社のサイト直下にあるrobots.txtとllms.txtを、1ファイルにつき1回取得して集計しました。
llms.txtを設置していたのは9社で、応答のあった180社の5.0%でした。
153社は404を返し、18社はllms.txtとは異なるHTMLページを返しました。
robots.txtで16種類のAIクローラー名を記載していたのは9社で、応答のあった184社の4.9%でした。
9社の内訳は、名指しで許可だけを書いた企業が2社、一部拒否が3社、全面拒否が4社でした。
AIクローラー名の記載がなかった175社では、「*」向けの規則が適用され、全面拒否はありませんでした。
Uravationは、学習用クローラーとAI検索用クローラーを分けて確認し、会社情報やサービス情報をllms.txtに整理することを提案しています。
記事のポイント
- llms.txtは9社のみ: 設置企業は電気機器、情報通信、精密機器など6業種に分かれていました。
- 検索用ボットは全面拒否なし: OAI-SearchBotは一部拒否が2社で、Claude-SearchBotとPerplexityBotも各1社でした。
- 調査には対象外あり: 取得できなかった企業はrobots.txtで41社、llms.txtで45社あり、結果には含まれていません。
このニュースがもたらす影響
- 導入を検討する企業: 自社サイトをAI検索に読ませるかどうかだけでなく、学習用と検索用のボットを分けて制御し、会社情報や問い合わせ先の構成まで点検する必要が生じそうです。
- 同業のサービス提供者: 大企業でもAIクローラー向けの明示的な整備が少ないため、robots.txtの診断に加え、AIが参照しやすい情報設計まで支援する余地が広がると考えられます。
- 企業の広報担当者: 公式サイトの情報がAIの回答でどう扱われるかを管理するには、発信後の掲載確認だけでなく、参照先となるページや説明内容を継続的に整理することが求められそうです。
このニュースの背景
AIクローラーへの対応状況を確認できるよう、公式サイト直下のrobots.txtとllms.txtを同じ条件で調べています。
応答のあった企業では、llms.txtの設置もrobots.txtでのAIクローラー名の記載も約5%にとどまり、多くは明示的な設定をしていませんでした。
一方、ChatGPT・Claude・Perplexityの検索用ボットを全面拒否した企業はなく、学習用クローラーと検索用クローラーを分けて扱う必要性が示されています。
ただし、取得できなかった企業は分母から外され、調査結果は2026年10月23日時点の状態に限られます。
関連するニュース
- ポップコーンは、国公私立大学800校の公式サイトを実測し、llms.txt設置率やAIクローラー対応状況を公表しました。
- TechSuite株式会社がAI検索72件を調査し、VCなど105社の登場傾向を分析しました。
- Iteraが30ジャンル・900クエリを調査し、AI Overview出現率92.1%と検索1位の推定クリック率12.7%を報告しました。
詳しい記事の内容はこちらから(引用元)
株式会社Uravationのプレスリリース(2026年10月31日 14時00分)【日経225構成銘柄の公式サイトを調査…
https://prtimes.jp/main/html/rd/p/000000238.000137731.html