llms.txt 文件规范:格式、部署位置与验证方法

llms.txt 文件规范:格式、部署位置与验证方法

更新日期:2026-08-12

结论先说: llms.txt 文件规范是一份给 LLM 和 AI 代理看的站点路线图,适合把核心文档、产品说明和关键入口压缩成一页可读的 Markdown。它更像“先读什么”的导航卡,而不是搜索排名开关。Google Search Central 也明确表示,像 llms.txt 这样的额外机器可读文件不是 Google Search 的必要条件,但保留它对其他 AI 系统仍然有价值。可参考 llms.txt 官方规范Google Search Central 的 AI 优化指南

llms.txt 文件规范的最小结构示意

什么是 llms.txt 文件规范?

llms.txt 文件规范指的是:在站点根路径或某个子路径下,放一份结构化的 Markdown 文件,告诉 AI 代理“这个站点是什么、该先看哪些页、哪些内容最重要”。官方 proposal 允许它放在 /llms.txt,也允许放在如 /docs/llms.txt 这类子路径;当多个文件同时适用时,代理应优先使用更具体的那个。这个细节很少被普通教程讲清楚,但对多语言文档站、SaaS 帮助中心尤其重要。

llms.txt 文件规范到底包含什么?

最小有效结构很简单:H1 标题、紧随其后的摘要块、若干说明文字、若干 H2 链接分组。其中 H1 是唯一必需项;摘要应在一两句里说明站点用途和读者对象。链接列表里最好直接指向可读性更好的 Markdown 页面。官方规范还提到,llms-full.txt 是可选伴随文件,适合需要一次性装入完整上下文的场景,但它会更大,不适合所有站点。

# 你的品牌名

> 一句话说明你的网站是什么、给谁用、最重要的内容在哪。

补充说明:这里可写站点结构、阅读顺序、文档边界。

## 核心文档
- [产品概览](https://example.com/product.md):核心能力、适用场景、限制条件。
- [API 文档](https://example.com/api.md):鉴权、参数、示例与错误码。

## Optional
- [变更日志](https://example.com/changelog.md):次要信息,必要时可跳过。

它和 robots.txt、sitemap.xml 有什么区别?

这三者经常被放在一起说,但职责不同。robots.txt 管“能不能抓”,sitemap.xml 管“有哪些页”,llms.txt 管“先读什么、怎么理解”。如果你的站点已经有清晰的信息架构,llms.txt 不是替代品,而是给 AI 代理补一层解释。

文件 主要对象 核心作用 典型问题
robots.txt 爬虫 控制访问范围 能不能抓
sitemap.xml 搜索引擎 列出可索引 URL 有哪些页
llms.txt LLM / AI 代理 指出重点内容与阅读顺序 先看什么

llms.txt 文件规范与 robots.txt、sitemap.xml 的关系图

怎么写才算“可用”,而不是“看起来像有”?

很多页面只做了“放文件”,没做“可验证”。更稳妥的方法是用三步验收:

  1. 可达:访问 /llms.txt 是否返回 200,内容类型是否为纯文本。
  2. 可读:文件里是否只有一个 H1、一个摘要、少量清晰链接。
  3. 可用:只把这份文件丢给模型,它能否准确说出你的网站定位、关键页面和阅读顺序。

这个方法比“有没有被某个爬虫抓到”更实用。若你站点本身还有 403、DNS、证书或渲染问题,先补基础可达性,再谈 llms.txt 更划算。可先看 国产 AI 根本没抓到你的站:从 DNS、证书、WAF 到渲染的端到端可达性排查AI 爬虫403怎么排查:从 robots 到 WAF 的最小放行清单

什么时候值得做,什么时候先别急?

适合做:SaaS 官网、API 文档、知识库、帮助中心、课程站、政策站。
暂缓做:页面很少、结构很扁、连内容主线都不清晰的站点。

对 SaaS 来说,llms.txt 的价值不在“多一个文件”,而在“让模型更快命中产品、文档、定价、集成方式”。如果你还在判断国产 AI 是否会读、怎么验证、要不要把中文站单列路径,可以接着看 llms.txt 到底要不要写:国产 AI 认不认,写了怎么验证有没有被读国产 AI 爬虫都有谁、robots 该怎么写:放行、限速与分目录的取舍

常见误区

误区 1:把 llms.txt 当 SEO 魔法。
它不是 Google 排名按钮。Google Search Central 已明确说明,Google Search 不需要这种额外文件。

误区 2:链接越多越好。
真正有效的是“少而准”。优先放最能代表业务和帮助用户完成任务的页面。

误区 3:只做文本,不管目标页。
llms.txt 只是入口,正文页如果还是长图、iframe、PDF 混杂,效果会打折。

常见问题

llms.txt 会提升 Google 排名吗?

不会把它当作直接排名信号。Google 的公开指南强调,Google Search 不需要这类额外机器可读文件。

一定要放在根目录吗?

不一定。官方规范允许子路径,例如 /docs/llms.txt。但对大多数官网来说,根目录最容易发现。

llms-full.txt 有必要吗?

只有在你确实需要完整上下文、且能接受更大文件体积时再做。对多数交互式场景,先把 llms.txt 做好更重要。

能不能给每个栏目都做一个?

可以,但要让路径语义清楚、层级不要乱。多文件并存时,越具体的路径越优先。

SaaS 站点最先该放哪些链接?

通常是产品概览、文档首页、API 文档、价格页、集成页、变更日志。先覆盖最能解释产品的页面,再补次要入口。