llms.txt はエージェントのための読書リストで、順位を決めるファイルではない
このファイルは Jeremy Howard が2024年9月に提案し、2026年8月に改訂したものです。サイトのルートに置く markdown ファイルで、必須なのはサイト名の H1 だけです。その後に、引用ブロックによる任意の短い要約と、エージェントが読むべきページへのリンクのリストが続き、リンク先は理想的には整形された markdown です。
提案は、誰のためのものかを率直に述べています。このファイルは、エージェントがユーザーを手伝う中で情報が必要になったときにその都度読まれることを想定しており、最もよく使われているのはソフトウェアのドキュメントで、コーディングエージェントがそれをたどって API リファレンスにたどり着きます。OpenAI、Anthropic、Google はいずれも開発者向けドキュメント用にこのファイルを公開しています。クロールを制御するものは何もなく、エンジンに引用を求めるものも何もありません。
Google は検索でファイルを無視すると言い、Ahrefs の5月のサンプルではファイルの97%がリクエストを受けていなかった
2026年7月10日に最終更新された、生成AI機能に関する Google のガイドは、無視してよいものの一覧の先頭に llms.txt を挙げています。公開しても、Google 検索での可視性を損なうことも高めることもない、検索では使っていないからだ、としています。
Ahrefs は2026年5月の137,210ドメインのサーバーログを調べました。有効なファイルを公開していたのは28%で、顧客層が技術寄りのため上限値だと Ahrefs は説明しています。それらのファイルの97%は、その月に1件もリクエストを受けていませんでした。届いたリクエストのうち、OAI-SearchBot や PerplexityBot のように、リアルタイムの質問に答えるためにページを取得するボットからのものは1.1%でした。Anthropic のコーディングエージェントを含むAIエージェントや学習用クローラーの方が、はるかに多く取得していました。また、存在しない llms.txt をリクエストしたAIボットはなかったため、ファイルがないことで機会を逃しているわけではありません。
ファイルのあるサイトへの6,343件の引用のうち、ファイルを指していたのは1件
Ahrefs は、誰がファイルを取得するかを測定しました。私たちは反対側、つまりエンジンが何を引用するかを知りたいと考えました。2026年8月23日から10月5日までの私たちのサンプルには、18のアカウントにまたがる ChatGPT、Perplexity、Claude、Google AI Overviews の4,228件の回答に、41,597件の引用が含まれています。10月8日、最も多く引用された300のドメインから /llms.txt を取得しました。
実際のファイルを返したのは129ドメインでした。137ドメインはファイルがないか、代わりに HTML ページを返しました。34ドメインは私たちをブロックしたかエラーになりました。ファイルのある129サイトは6,343回引用されました。そのうちファイルを指していた引用は1件で、10月2日に Perplexity が引用した llms-full.txt でした。llms.txt を引用した回答はありませんでした。
最も多く引用されたサイトの大半は、ファイルを持っていません。上位10サイトのうち8サイトにはファイルがなく、2サイトは私たちの確認をブロックしました。上位25サイトでは、ファイルがあるのは3サイトです。
129件のファイルのうち14件は、ショッピングエージェント向けに書かれた1つのテンプレートからだった
14件のファイルは、すべてオンラインストアのもので、「Agent Instructions」という見出しの1つのテンプレートに沿っていました。いずれも、ストアが Shopify で構築されていることを述べ、直接購入できるようスキルをインストールするようショッピングエージェントに指示しています。Ahrefs も同じ傾向を見つけています。Wix はサイトのためにこのファイルを自動生成し、ほかのサイトビルダーも今ではファイルの有無を確認するようになっています。
これが重要な理由は2つあります。多くのサイト所有者は、自分のファイルに何が書かれているかを選んでいません。そしてファイルは、読んだあらゆるエージェントに対してあなたの代わりに語るものなので、自社サイトのページと同じように確認する価値があります。
安く済むなら公開し、本当の1時間は別のことに使う
ファイルは手間がかからず害もないので、今あるものを削除する理由はありません。ただ、それをAI可視性の取り組みとして数えないでください。
- 開発者向けドキュメントや API があるなら、公開しましょう。データが実際に示している読み手はコーディングエージェントです。
- 中身は単純なリンクと1行の説明だけにし、指示と読めるものは入れないでください。バージョン管理に入れ、プラットフォームが生成した内容は必ず読みましょう。
- それが本物の markdown ファイルで、そのパスでトップページが返されていないことを確認しましょう。上位100ドメインのうち7ドメインは、ステータス200で HTML を返していました。
- 残りの時間は、エンジンが自社カテゴリで引用するページに使いましょう。自社の製品ページと比較ページ、そしてすでに自社の横で引用されている第三者のページです。
この分析が誤っている可能性がある点
引用は読み取りではありません。エンジンがファイルを取得し、そのリンクをたどって、ファイルが指すページを引用することもありえますが、私たちのデータにはそれが表れません。測定したのは回答に届いたものであって、エンジンが目を通したものではありません。
ファイルを取得したのは、抽出期間が終わった後の10月8日です。一部のファイルは、それと並ぶ引用よりも新しいかもしれません。
300のドメインは、私たちの18のアカウントが追跡しているものから来ています。小売、消費者向けアプリ、ビジネスソフトウェアが混在し、米国外で販売されているブランドも多く含まれます。別のカテゴリの組み合わせでは、違って見えるかもしれません。
Ahrefs の数値は1か月分で、顧客層は SEO 寄りです。エージェントがより多くのブラウジングを担うようになれば、取得量は増えるかもしれません。
