行政機関の公式サイト調査：98%がAIクローラーを規制していない実態

行政の公式サイトにおけるAIクローラーの扱いについての調査

株式会社Uravationが2026年11月に実施した調査によると、全国の47都道府県や20政令指定都市、幅広い行政機関を含む合計114の公式サイトのうち、なんと98.1%がAIクローラーに関する記載を含まないことが明らかとなりました。この結果は、今後のAIの利用における課題を浮き彫りにしています。

調査の概要

この調査では、主に二つの要素が焦点となっています。まず一つ目は「robots.txt」に記載されたAIクローラーへの対応、二つ目はAI用のサイト案内ファイル「llms.txt」の設置状況です。調査の結果、robots.txtが応答した106サイトのうち104サイトにはAIクローラーに関する記載がなく、具体的に名指ししていたのはわずか2サイトのみであることが確認されました。これにより、多くの行政サイトがAIとの相互作用にあまり積極的でないことが示唆されています。

AIクローラーの名指しとllms.txtの状況

実際に名指しされていたのは、106サイト中わずか2サイトで、それらのサイトは全面的にAIクローラーを拒否していたことが分かりました。また、llms.txtを設置しているサイトは、103サイト中1サイトと非常に低い数字にとどまっており、特に都道府県および政令指定都市ではその設置例はゼロでした。このような状況は、AIによる情報取得や検索の観点からも大きな制約となる可能性があります。

背景と必要なアクション

近年、OpenAIやAnthropic、Perplexityといった企業が提供するAIクローラーは、AIの検索機能において重要な役割を果たしています。これらのクローラーが拒否された場合、その情報は検索結果に表示されないことになります。このため、各サイトの運営者には、AIクローラーと一般的なクローラーとの明確な区別をつける必要性が求められています。

Uravationは、これらの結果を踏まえ、サイトの運営者に対して二つの重要な点を確認することを提案しています。第一に、学習用クローラーをブロックする場合において、AI検索用クローラーまで同時にブロックしている可能性がないか再確認すること。第二に、よくある質問に対して一次情報をAIが理解できる形で示す手法としてllms.txtの設置を推奨しています。

結論

AIの活用が進む現代において、行政の公式サイトがどのようにAIクローラーに対応するかは、情報公開の透明性や正確さに significant な影響を与えると言えるでしょう。今後は、AIとの関わり方を見直し、より良い情報提供手段を模索することが求められます。Uravationではこの認識が広まることを願っており、企業がAI検索での一次情報の引用をどのように行えるか、研究結果も順次公開していく予定です。