llms.txt とは?AIクローラーに正しく読ませる設定(.mdとの違いも)
従来の検索エンジンにはrobots.txt がありました。「どのページをクロールするな」を教える標準です。AI 検索の時代には、その対となるllms.txt が登場しています。これは ChatGPT・Perplexity・Claude といった AI クローラーに「あなたのサイトのうち、どこを文脈として読めばいいか」を教える仕組みです。この記事では、llms.txt の意味、よく混同される .md との違い、そして正しい書き方を整理します。
1. llms.txt とは何か
llms.txt は、2024 年に Jeremy Howard(Answer.AI)と Hugging Face が提唱した、AI 向けのサイト説明ファイルの標準案です。サイトのルート(例:https://example.com/llms.txt)に置くと、AI モデルやクローラーがそれを読み取り、サイトの構造を効率的に理解します。
robots.txt との決定的な違いは「否定か肯定か」です。
- robots.txt:「ここは読むな」を指示する(アクセス制限)。
- llms.txt:「ここが重要だから、回答の文脈として使え」を提示する(可視性の最大化)。
GEO(Generative Engine Optimization)の文脈では、llms.txt は「AI に自分を正しく説明する名刺」のような役割を果たします。
2. なぜ AI 検索(GEO)に効くのか
AI はサイト全体を逐一読むのではなく、与えられた文脈から要約・引用します。llms.txt で「重要なページ(ブログ・料金・会社概要)」を明示すると、AI が自社を引用する精度と頻度が上がる傾向があります。技術的な基礎は『Schema.org構造化データでAIに正しく読ませる方法』でも扱っていますが、llms.txt はそれを「サイト横断で一覧する」レイヤーです。
ここで鍵になるのが引用ギャップ(citation gap)。これは「自社が出るべきクエリなのに、AI 回答に出ていない」状態を指します。ai citation gap analysis という検索が増えているように、業界は「どこに出ていないか」を測り始めています。llms.txt で関連ページを AI に提示することは、この空白を埋める第一歩になります。
3. .md と .txt の違い(ファイル形式の混乱)
検索トレンドで .md vs .txt が検索されているのは、この混乱からです。結論から言うと:
- 拡張子は
.txt:ファイル名はllms.txt(llms.mdではありません)。AI クローラーはルートの/llms.txtを探します。 - 中身は Markdown 記法:プレーンテキストの中に
#や-や[名前](URL)を書きます。 - .md は「人間向けドキュメント」、
.txtは「AI クローラー向けの軽量テキスト(Markdown 記法を含む)」という使い分けです。
つまり「拡張子は .txt だが、書き方は Markdown」——これが llms.txt の正解です。
4. 正しい書き方(フォーマット)
推奨フォーマットはシンプルです。
# サイト名
> サイト全体を1〜2文で要約したブロック引用。
## 詳細ページ
- [料金](https://example.com/#pricing): プランと価格の一覧
- [ブログ](https://example.com/blog.html): GEO・AI検索最適化の実践知識
- [会社概要](https://example.com/about.html): 私たちの理念と実績
## 追加リソース
- [llms-full.txt](https://example.com/llms-full.txt): サイト全文を1ファイルにまとめたもの
ポイントは 3 つ:① 1 行目を H1 でサイト名に、② その下を > で要約に、③ 重要ページを ## セクションでリンク付きリストにする。オプションで llms-full.txt(サイト全文を 1 ファイルにまとめたもの)へのリンクを添えると、AI がより深く読めます。
5. 設置・設定手順(3ステップ)
① ルートに /llms.txt を置く
サイトの最上位ディレクトリに llms.txt を配置し、公開 URL(https://あなたのドメイン/llms.txt)で直接開けるようにします。
② 重要ページをリストアップする
自社を代表する 5〜10 ページ(トップ・料金・ブログ・about・主要サービス)を、上のフォーマットで列挙します。AI が迷わず「文脈」を選べるようにします。
③ 現状を測り、引用ギャップを埋める
llms.txt を置いただけで終わりにしないこと。まずは URL を入れるだけの無料 GEO スキャンで、現在の AIVO スコアと「出ていないべきクエリ」を可視化し、llms.txt で補うページを決めます。KPI の測り方は『AI検索可視性を測るKPI』で整理しています。
llms.txt は「入り口」、測定は「続け方」。
AI GeoLens の無料スキャンなら、クレジットカード不要・30 秒で AI 可視性と引用ギャップの現在地を確認できます。仕組みは会社概要もご覧ください。
次回は『AI引用ドメインを増やす方法(cited domains / brand mention)』で、llms.txt だけでなく、AI が自社を「複数ページから」引用するようにする具体策を整理します。