llms.txt 目录索引设计:让 AI 快速读懂官网核心页面

llms.txt 目录索引设计:让 AI 快速读懂官网核心页面

作者:maxaeo.cn|发布日期:2026-09-03|更新日期:2026-09-03

llms.txt 目录索引设计的核心,不是把所有 URL 塞进一个文本文件,而是用最少页面说明“我是谁、解决什么问题、证据在哪里、下一步该读什么”。对 SaaS 官网来说,它更像面向 AI 助手的产品资料导航。

llms.txt 目录索引设计示意图:从品牌概述到产品、方案、证据与支持页面的分层导航

什么是 llms.txt 目录索引设计?

llms.txt 目录索引设计是把网站关键页面按 AI 理解路径重新编排:先给品牌定义,再列核心产品、适用场景、文档、案例、价格或支持页,并为每个链接补一句可验证说明。

根据 Chrome Lighthouse 的 llms.txt 说明,llms.txt 是一种仍在发展的约定,用于给 LLM 和 AI agent 提供机器可读的网站内容摘要。它不是 robots.txt,也不是 sitemap.xml 的替代品;更准确地说,它是“精选入口”。

这意味着目录索引的质量比数量重要。一个列出 30 个高价值页面、描述清楚的网站,通常比列出 800 个无说明 URL 的文件更容易被理解。

它和 sitemap.xml、robots.txt 有何区别?

llms.txt 负责解释重点内容,sitemap.xml 负责发现 URL,robots.txt 负责抓取边界。三者可以协同,但不要混用职责。

文件 主要对象 核心作用 常见误区
robots.txt 搜索与 AI 爬虫 允许或限制抓取路径 误以为能提升引用
sitemap.xml 搜索引擎 批量发现页面 把低质量页也全量提交
llms.txt LLM、AI agent、检索系统 提供精选内容地图和上下文 复制全站 URL,写成广告文案

如果站点还没处理抓取权限,建议先检查 AI 爬虫能否访问关键页面。可参考 MaxAEO 的国产 AI 爬虫放行规则,把 robots、UA、WAF 与 CDN 的边界先理顺,再设计 llms.txt。

SaaS 官网应该收录哪些页面?

SaaS 官网的 llms.txt 应优先收录能回答采购问题的页面:产品是什么、适合谁、怎么用、和竞品差异、价格口径、客户证据、安全合规、帮助文档。

一个实用的优先级矩阵如下:

优先级 页面类型 是否建议放入 说明写法
P0 首页、产品页、核心方案页 必放 用事实描述产品对象和能力
P0 定价、演示、联系我们 视业务而定 标明购买路径或咨询入口
P1 文档、API、集成说明 建议放 说明适用任务,不要只写“文档”
P1 案例、行业方案、对比页 建议放 写清行业、场景、结果口径
P2 博客精选、白皮书、研究页 选择放 只放能支撑品牌认知的常青内容
不建议 标签页、分页、站内搜索页 不放 信息密度低,容易稀释主题

MaxAEO 在做品牌 AI 可见性诊断时,经常把问题拆成“品牌、竞品、用户购买问题”三类。映射到 llms.txt,就是不要只围绕公司自述建目录,还要覆盖 AI 回答用户问题时可能需要引用的证据页。

一个更适合 AI 的五层目录框架

高质量 llms.txt 可以按“身份—能力—证据—操作—治理”五层设计。这个框架能避免目录只像导航栏,也能避免陷入全站地图。

  1. 身份层:品牌名、官网、所属品类、服务对象。
  2. 能力层:产品功能、解决方案、核心使用场景。
  3. 证据层:案例、报告、方法论、第三方可验证资料。
  4. 操作层:文档、定价、演示、支持、迁移指南。
  5. 治理层:安全、隐私、合规、更新日志、数据政策。

以 AI 搜索可见性 SaaS 为例,目录不应只写“产品页、博客页、关于我们”。更好的写法是:

# Example SaaS

> Example SaaS 是面向 B2B 品牌的 AI 搜索可见性监测平台,帮助团队观察品牌在主流 AI 回答中的提及、排序、情感与引用来源。

## Core Product
- [AI Visibility Dashboard](https://example.com/product): Shows mention rate, ranking position, sentiment and cited sources across AI platforms.
- [Competitor Benchmarking](https://example.com/competitor): Compares brand visibility and recommendation position against selected competitors.

## Buyer Evidence
- [Security](https://example.com/security): Explains encryption, data isolation and customer data usage boundaries.
- [Pricing](https://example.com/pricing): Lists subscription plans and enterprise contact path.

注意,每条说明最好回答一个问题:这个页面能让 AI 了解什么?如果答案只是“了解更多”,就说明这条不够具体。

原创观察:36 个 SaaS 页面样本暴露的三个问题

MaxAEO 内容团队用“首页、产品页、定价页、案例页、帮助文档、博客方法论”6 类页面,抽样复盘了 36 个 SaaS 官网页面的信息结构。结论是:AI 不难找到页面,难的是判断页面在采购链路里的角色。

三个高频问题最值得优先修:

  • 页面标题像营销口号:例如“重新定义增长”,但没有说明品类、对象和能力。
  • 证据页和产品页断开:案例里有结果,产品页没有指向;AI 难以把能力和证据合并。
  • 博客内容没有目录角色:文章很多,但缺少“这篇支撑哪个采购问题”的描述。

因此,llms.txt 目录索引设计应当把每个 URL 当成一个证据节点,而不是普通链接。尤其是 SaaS 品牌,建议在每条链接后补充“适用对象 + 页面回答的问题 + 可信信息类型”。

SaaS 官网 llms.txt 页面优先级矩阵:产品页、方案页、证据页、文档页和治理页

如何给每条链接写描述?

链接描述应短、准、可验证。理想长度是 12–25 个中文词,包含页面主题、使用场景和事实类型,不要堆关键词或夸张形容词。

可以用这个公式:

页面是什么 + 面向谁/什么问题 + 提供什么事实

示例:

  • 不佳:- [产品](https://example.com/product): 行业领先的一站式智能增长平台。
  • 更好:- [产品](https://example.com/product): 介绍面向市场团队的线索评分、自动化触达和报表功能。
  • 不佳:- [博客](https://example.com/blog): 最新观点和干货。
  • 更好:- [AI 搜索研究](https://example.com/blog/ai-search): 解释 AI 搜索可见性、引用来源和品牌提及率评估方法。

llmtxt.info 的文件格式说明也强调,llms.txt 是精选地图,不是全量索引。描述越像广告,越不利于下游系统判断页面用途。

llms.txt 上线前检查清单

上线前至少检查 8 件事:路径可访问、格式简洁、链接有效、描述准确、权限一致、缓存合理、更新机制明确、能被日志验证。

  1. 文件放在根目录,例如 /llms.txt,必要时可为文档目录设置路径级文件。
  2. 第一行只有一个 H1,用品牌名或项目名。
  3. H2 分组清晰,不使用复杂表格、图片或 YAML frontmatter。
  4. 所有 URL 优先使用绝对地址,避免相对路径被复制后失效。
  5. 不收录登录后页面、预览页、测试环境和带 token 的 URL。
  6. llms.txt、robots.txt、WAF、CDN 规则不互相冲突。
  7. 每次核心页面改版后同步更新文件。
  8. 用服务器日志确认 AI 爬虫是否访问了文件和被列出的内容页。

如果已经部署但不确定是否可用,可用 MaxAEO 的llms.txt 文件检测清单检查存在性、可访问性与基础生效条件;若关注语法和 AI 可读性,可继续参考llms.txt 合规检测清单

目录设计后如何验证效果?

llms.txt 不能单独证明 AI 可见性提升,验证应看“同一批问题、同一批平台、同一口径”下,品牌提及、排序、情感和引用来源是否变化。

推荐用三步法:

  1. 锁基线:选 10–30 个真实用户问题,记录品牌是否被提及、排第几、引用哪些域名。
  2. 改目录和内容:发布 llms.txt,同时补足产品页、方案页、证据页之间的内部链接和事实表述。
  3. 同口径复测:至少观察 2–4 周,比较提及率、推荐位次、自有域名引用占比的趋势。

MaxAEO 国内版覆盖豆包、DeepSeek、腾讯元宝、通义千问、文心一言、Kimi 等国产 AI 平台,可用于持续监测品牌在 AI 回答中的提及率、排序、情绪评价与引用来源。若需要判断哪类信源正在影响 AI 回答,可结合AI 引用来源分析方法定位被引用页面,再回到 llms.txt 调整目录优先级。

AI 搜索验证流程图:从基线问题矩阵到引用来源分析再到 llms.txt 目录调整

常见问题

llms.txt 会直接提升 AI 搜索排名吗?

不会直接保证。公开资料只能说明它是一种新兴约定,用于提供高信号内容地图;没有可靠证据表明仅发布 llms.txt 就能稳定提升 AI 引用或排名。

llms.txt 要不要放所有博客文章?

不建议。博客应按主题精选,只放能支撑品牌定义、产品能力、行业问题、采购决策或方法论的常青文章。分页、标签页和低质量短文不应进入目录。

中文站点需要英文 llms.txt 吗?

如果主要用户、页面和 AI 监测场景都在中文环境,中文 llms.txt 更自然。多语言站点可以分别设置不同语言版本,但每个版本应指向对应语言页面,避免混杂。

llms-full.txt 是否必须做?

不是必须。llms.txt 更适合作为精选目录,llms-full.txt 更像合并后的长文本资料。除非明确有系统需要读取完整内容,否则先做好 llms.txt 和核心页面本身更重要。

MaxAEO 能如何帮助验证 llms.txt 是否有效?

MaxAEO 提供免费 AI 可见性诊断,可检测品牌在多个 AI 平台中的提及率、排名与情感;国内版还支持对豆包、DeepSeek、腾讯元宝、通义千问、文心一言等平台进行持续监测,帮助观察目录和内容改动后的趋势。

结论:把 llms.txt 当成 AI 采购助理的阅读路线

llms.txt 目录索引设计的最佳目标,是让 AI 在几十秒内理解一个官网的核心事实:品牌是谁、产品做什么、适合谁、证据在哪、如何继续核验。它不应替代内容质量、技术可访问性和引用来源建设。

对 SaaS 官网来说,最小可行版本可以从 20–40 个高价值 URL 开始:产品、方案、定价、文档、案例、安全、支持和精选方法论。先保证每条链接有明确角色,再用 AI 可见性监测验证结果变化,这比一次性生成臃肿目录更可靠。