本文收录于 Zeso 技术百科与核心文档库。你也可以在 完整技术文档.
技术百科与问答2 分钟阅读·235 字

什么是 llms.txt——这份提案、它的格式,以及证据对它说了什么

核心定义与要点提炼

llms.txt 是放在站点根目录的一份 Markdown 索引,用来告诉 AI 智能体哪些页面值得读。这里讲清它的格式、第二版改了什么,以及两项大规模研究关于「它能否换来引用」的发现。

llms.txt 是一份提案:一份放在网站根目录的 Markdown 文件,用来告诉 AI 智能体这个站点是什么、哪些页面值得读。它由 Answer.AI 的 Jeremy Howard 于 2024 年 9 月 3 日发布,规范正文在 llmstxt.org。

它是一份提案,不是一项标准——没有任何标准机构批准过它。这个区别不是 咬文嚼字:robots.txt 在 2022 年成为互联网标准(RFC 9309),sitemap.xml 是早已确立的协议,而 llms.txt 两者都不是。

它要解决的问题

语言模型的上下文窗口有限,而一个网页里大部分是导航、脚本、布局和广告。 提案自己的理由只有一句话:站点作者最清楚该给模型提供哪些内容。

所以这份文件就是一份为「读文本而非渲染页面」的机器手绘的目录。更长的 llms-full.txt 则把内容本身内联进来,而不是只做指路。

格式

顺序是固定的,其中只有一部分是必需的:

  1. 一个 H1,写站点或项目名称。这是唯一必需的元素——只有标题、其余为空的

文件是合法的,但毫无用处。

  1. 一段 blockquote 摘要。这是智能体最先读到的内容,也是最可能被它引用

的一句。

  1. 可选的正文段落或列表,不含标题——格式把标题留给文件标题和链接分区。
  2. 若干 H2 分区,每个分区是一组链接,写成

- [标题](url): 一行说明这个页面回答了什么。

2026 年 8 月发布的第二版增加了三件事:这份文件可以放在任意路径下并覆盖 其下的页面,多个文件并存时以最具体的那个为准;页面可以以 Markdown 副本 形式提供(page.html.md 或 page.md);页面可以用 rel="alternate" type="text/markdown" 指向自己的 Markdown 副本,用 rel="describedby" 指向覆盖它的那份清单。

那个 ## Optional 分区——约定上放智能体在上下文紧张时可以先丢掉的页面—— 在第一版里是一条约定,在第二版里仍然只是约定,因为第二版取消了它的特殊 处理。

证据怎么说

这是大多数指南略过的一段,也正是决定「这份文件值不值得花一小时」的那一段。

四个来源,结论一致:

来源时间它测了什么结果
谷歌《为生成式 AI 搜索功能做优化》指南—这份文件对搜索可见度的影响创建它「对你在谷歌搜索中的可见度或排名既无损害也无帮助」;而 AI Overviews 与 AI Mode 不需要任何额外条件,只要页面已被索引并有资格以摘要形式展示
SE Ranking2025 年 11 月约 30 万个域名的引用频率「发布该文件」与「被引用」之间没有关系——把这个变量从引用预测模型里拿掉,精度反而略有提升
Trakkr2026 年 3 月37,894 个被 AI 引用的域名的平均引用次数有该文件的站点平均 6.8 次引用,没有的 6.7 次——相差十分之一次引用,没有任何检验能把它与噪声区分开。整体采用率约 10%
John Mueller2025 年 4 月AI 服务到底会不会去取这份文件没有任何 AI 服务声称使用它,而且从服务器日志能看出它们连请求都没发起

Mueller 的比喻是最锋利的那个版本:这份文件就是站点主对自己站点的单方面描述—— keywords meta 标签,只不过年轻一些。

它真正有位置的地方更窄,但确实存在:面向开发者与智能体的工具。编程助手 与检索型智能体可以用它直接取到正确的页面,而不必抓取渲染后的 HTML,节省的 token 是可测量的。Anthropic、Stripe、Zapier、Cloudflare、Vercel 都为各自的 文档发布了它。Anthropic 自己的取舍是最清楚的例子——索引约 8,000 token, 完整文件约 481,000 token。

它不是什么

  • 不是访问控制。 没有任何机制强制爬虫去读它。某个具名的 AI 爬虫能不能

抓你的页面,由 robots.txt 决定。

  • 不是站点地图。 站点地图列出每一个 URL;这份文件是策展。塞进几百条链接

的文件,只是一份多了几步的站点地图。

  • 不是排名因素,按上面的证据。
  • 不是训练退出开关。 它是定位文件,不是权限文件。

诚实的结论

把它当作良好的 housekeeping,以及对那些确实会去找它的智能体的一份善意。 不要把它归到 SEO 名下然后期待排名。它的价值在于它所强制的纪律——为每个页面 写一句「它回答了什么」,这和写一条好的 meta 描述是同一种能力,本身就值得 拥有。

在本站上,这份文件由已发布的站点生成,因此不可能与站点不一致;租户无需维护 站点的第二份结构副本就能得到它。

来源

在你的独立域名上体验边缘极速

全球 330+ 边缘节点、中位数低于 50ms 的 TTFB、Anycast 任播路由与全自动免费 SSL 证书。

60 秒极速部署

相关指南与关联页面