llms.txt 是一项社区提案,建议用 Markdown 文件向 AI 代理简要介绍网站并提供实用资源链接。它不是爬虫访问规则、搜索排名因素,也不能保证 AI 产品会读取或引用页面。

Google 的现行指引指出,网站不需要新增机器可读文件、AI 文本文件或特殊标记,就能出现在 AI Overviews 或 AI Mode 中。适用于整体搜索的 SEO 基础做法仍然适用。其他工具可能会选择读取 llms.txt,因此若有明确用途,网站业主可以将它作为一份简短、持续维护的索引。

提案包含什么

现行提案允许网站或其中一个区段发布 Markdown 格式的 llms.txt 文件。内容可以包括:

  • 网站或项目名称的 H1,这是唯一必需的部分。
  • 可选的引用区块,用来概述网站。
  • 可选的说明段落或清单,但不能加标题。
  • 可选的 H2 区段,以清单链接至相关页面或 Markdown 资源。

提案建议保持概要简短,并链接到详细资料来源。Optional 标题只是标记次要内容的惯例,并不是访问控制规则。

与 robots.txt 和站点地图的区别

Split screen showing messy HTML code on the left and clean, structured Markdown text on the right.
这些文件的用途不同:

这些文件的用途不同:

  • robots.txt 为遵循规则的自动爬虫提供抓取指示。它不能可靠地保护私人信息,也不能保证网址不会被索引。
  • sitemap.xml 列出网站希望搜索引擎发现的网址。它不控制访问或排名。
  • llms.txt 是一份提议中的精选指南,供选择读取它的代理使用。它不授予或拒绝访问权限,也不会改变搜索引擎能抓取的内容。

不要用 llms.txt 取代身份验证、服务器权限、robots 指令或 noindex 控制。不要在文件里放入机密信息,或公开网站上没有的声明。

Bar chart showing high token usage for HTML scrapes and very low token usage for llms.txt.
不要用 llms.txt 取代身份验证、服务器权限、robots 指令或 noindex 控制。

何时可能有用

简短索引能帮助兼容的代理找到官方文档、产品信息、政策或其他权威来源。如果一个网站有大量文档,而且业主能够持续维护文件及链接,这种做法可能有用。

这只是一种可能的内容发现方式,并非提升搜索曝光、获得 AI 引用或减少错误答案的已证实途径。Google 明确表示,其 Search AI 功能不需要这个文件。使用前应查阅所针对工具的要求,确认它是否支持这种格式。

创建并维护文件

  1. 选定明确范围,例如整个网站或文档区段。
  2. 写一段简短、准确的摘要,并选出公开的权威页面。
  3. 链接到回答常见问题的现行页面,并使用稳定网址和明确名称。
  4. 检查每条链接,确认页面可公开访问,而且文件不会让人误以为它控制访问权限。
  5. 指定负责人,并在重要页面、产品或政策变更后审核文件。

简短文件的示例:

A code editor window displaying the standard structure of an llms.txt file including header, summary, and links.
简短文件的示例:
# 示例机构

> 简要、客观地介绍机构及其公开网站。

## 主要资源

- [服务](https://example.com/services/): 现行服务范围
- [文档](https://example.com/docs/): 技术参考资料

应以准确且能在链接页面中找到的信息替换示例内容。不要把此示例说成 Google Search 的规定格式。

发布文件而不影响网站

按目标工具要求,将文件作为纯文字或 Markdown 发布,常用路径是 /llms.txt。提案也允许在子路径发布文件,用来说明该区段下的资源。发布后应测试公开回应、内容类型、访问权限和链接。如果通过插件或建置流程生成文件,应将它纳入部署,并指定维护负责人。

提案也讨论了链接页面的 Markdown 版本,例如备用的 .md 网址。这不是必需做法。应评估是否增加重复维护工作,并确保 HTML 页面仍然完整、可抓取且具权威性。不要只在 AI 文件中提供重要事实。

A comparison chart showing the differences between robots.txt for bots, sitemap.xml for search engines, and llms.txt for AI agents.
提案也讨论了链接页面的 Markdown 版本,例如备用的 .md 网址。

如何评估成效

确认文件可以访问、内容准确,而且对支持它的工具有帮助。如果服务器分析能可靠识别来源,可以衡量引荐流量或请求,但没有可见访问记录,不代表模型一定没有使用文件。没有证据时,不要宣称它提升了 SEO 或 AI 曝光。

常见问题

llms.txt 能提升 Google 排名吗?

Google 表示,AI Search 不需要新增的 AI 文本文件或特殊标记。没有依据可以保证加上 llms.txt 后会提升 Google 排名。

它能控制 AI 爬虫吗?

不能。这是提议信息文件,不是访问控制机制。应使用身份验证、服务器控制和相关爬虫指令管理访问。

ChatGPT、Gemini 或其他 AI 系统会读取它吗?

不要假设它们会读取。各产品的支持情况不同,也可能改变。请查看相关工具的最新文档。

每家企业都应该发布吗?

不需要。只有当精选索引能帮助明确的用户或代理工作流程,而且有人负责维护时才值得发布。结构清楚、方便访问的来源页面仍是首要工作。

结语

把 llms.txt 视为一种可选、仍在发展的惯例。它可以为选择使用它的代理整理链接,但不能取代优质页面、搜索控制或以证据为基础的技术 SEO,也无法保证内容会被发现或引用。

资料核对日期:2026 年 10 月 20 日。 llms.txt 提案第 2 版及 Google 的网站与 AI 功能指引。