Uravation調査、日経225のllms.txt設置は5.0% AI検索用ボットの全面拒否は0社

日経平均株価の構成銘柄225社の公式サイトのうち、robots.txtでAIクローラーを名指ししていたのは9社でした。生成AIの研修・コンサルティング・開発を手がける株式会社Uravationが2026年10月31日、10月23日時点の調査結果を公開しました。ChatGPT・Claude・Perplexityの検索用ボットを全面拒否していた社はありませんでした。

発表の内容

調べたのは、日経平均プロフィルの構成銘柄一覧（10月23日更新分）に載る225社です。Wikidataの「公式ウェブサイト」の項目などから1社1サイトを決め、サイト直下の /robots.txt と /llms.txt を10月23日に1社ずつ、1ファイルにつき1回だけ取得しています。ブラウザは装わず、調査と分かるユーザーエージェント名を名乗ったとのことです。アクセス拒否や応答不能で取得できなかった社は分母から外しているため、割合の母数は項目ごとに違います。

調べたこと	母数	結果
llms.txt の設置	180社	9社（5.0%）。153社は404、18社は別のHTMLページ
robots.txt の有無	184社	テキストで返ったのは102社（55.4%）。82社（44.6%）は置いていない
AIクローラーの名指し	184社	9社（4.9%）。175社（95.1%）は記載なし

名指ししていた9社を「いちばん厳しい扱い」で分けると、名指しで許可だけを書いた社が2社、一部拒否が3社、全面拒否が4社。名前の出てこないクローラーには「*」（すべてのクローラー）向けの規則が適用されますが、その「*」について全面拒否していた社は0社でした。

ボット別の内訳も出ています。学習用では、GPTBot（OpenAI）が全面拒否1社・名指しで許可4社。ClaudeBot、Google-Extended、CCBotは、それぞれ全面拒否1社・一部拒否1社です。AI検索用では、OAI-SearchBotが一部拒否2社、Claude-SearchBotとPerplexityBotが各1社で、全面拒否はいずれも0社。利用者の操作で動くChatGPT-User・Claude-User・Perplexity-Userも全面拒否0社でした。全面拒否が多かったのは、Bytespiderの3社、Amazonbotとmeta-externalagentの各2社です。

llms.txtを置いていた9社の業種は、電気機器2社、情報通信2社、精密機器2社、自動車・小売業・サービスが各1社。社名ごとの結果は公表されていません。

調査の限界も書かれています。取得できなかった社（robots.txtで41社、llms.txtで45社）の状況は分からないこと。取得は各ファイル1回だけで、10月23日時点の状態であること。公式サイトを1社1つに決めているため、別ドメインの製品サイトや、サイト直下以外に置かれたllms.txtは対象外であること。そして「全面拒否」は Disallow: / の有無だけで分けていること。

Uravationの代表取締役・佐藤傑氏は、AIクローラーを止めるか通すかの議論はよく聞くとしたうえで、大企業の公式サイトの9割以上は「まだどちらの判断もしていない状態」だったとコメントしています。

編集部の見方

止めるか通すかを決めていない。その状態がそのまま数字になりました。

名指ししていたのは9社。robots.txt自体が無い社が82社。AIクローラーを通す判断をしたから通っている、という会社はほとんどありません。既定のまま読める状態になっているだけです。それが悪いとは言いませんが、意図の結果ではない。

裏を返せば、AI検索用のボットを全面拒否した会社はまだ1社もない、ということでもあります。これから設定を書くときに間違えやすいのもそこで、GPTBotやClaudeBotの隣に、OAI-SearchBotやClaude-SearchBotまで並べてしまう。10月31日に書いた共通シグナルも、対象は学習だけで検索は含みません。