llms.txt 是一项社区提案,建议用 Markdown 文件向 AI 代理简要介绍网站并提供实用资源链接。它不是爬虫访问规则、搜索排名因素,也不能保证 AI 产品会读取或引用页面。
Google 的现行指引指出,网站不需要新增机器可读文件、AI 文本文件或特殊标记,就能出现在 AI Overviews 或 AI Mode 中。适用于整体搜索的 SEO 基础做法仍然适用。其他工具可能会选择读取 llms.txt,因此若有明确用途,网站业主可以将它作为一份简短、持续维护的索引。
提案包含什么
现行提案允许网站或其中一个区段发布 Markdown 格式的 llms.txt 文件。内容可以包括:
- 网站或项目名称的 H1,这是唯一必需的部分。
- 可选的引用区块,用来概述网站。
- 可选的说明段落或清单,但不能加标题。
- 可选的 H2 区段,以清单链接至相关页面或 Markdown 资源。
提案建议保持概要简短,并链接到详细资料来源。Optional 标题只是标记次要内容的惯例,并不是访问控制规则。
与 robots.txt 和站点地图的区别
这些文件的用途不同:
- robots.txt 为遵循规则的自动爬虫提供抓取指示。它不能可靠地保护私人信息,也不能保证网址不会被索引。
- sitemap.xml 列出网站希望搜索引擎发现的网址。它不控制访问或排名。
- llms.txt 是一份提议中的精选指南,供选择读取它的代理使用。它不授予或拒绝访问权限,也不会改变搜索引擎能抓取的内容。
不要用 llms.txt 取代身份验证、服务器权限、robots 指令或 noindex 控制。不要在文件里放入机密信息,或公开网站上没有的声明。
何时可能有用
简短索引能帮助兼容的代理找到官方文档、产品信息、政策或其他权威来源。如果一个网站有大量文档,而且业主能够持续维护文件及链接,这种做法可能有用。
这只是一种可能的内容发现方式,并非提升搜索曝光、获得 AI 引用或减少错误答案的已证实途径。Google 明确表示,其 Search AI 功能不需要这个文件。使用前应查阅所针对工具的要求,确认它是否支持这种格式。
创建并维护文件
- 选定明确范围,例如整个网站或文档区段。
- 写一段简短、准确的摘要,并选出公开的权威页面。
- 链接到回答常见问题的现行页面,并使用稳定网址和明确名称。
- 检查每条链接,确认页面可公开访问,而且文件不会让人误以为它控制访问权限。
- 指定负责人,并在重要页面、产品或政策变更后审核文件。
简短文件的示例:
# 示例机构
> 简要、客观地介绍机构及其公开网站。
## 主要资源
- [服务](https://example.com/services/): 现行服务范围
- [文档](https://example.com/docs/): 技术参考资料
应以准确且能在链接页面中找到的信息替换示例内容。不要把此示例说成 Google Search 的规定格式。
发布文件而不影响网站
按目标工具要求,将文件作为纯文字或 Markdown 发布,常用路径是 /llms.txt。提案也允许在子路径发布文件,用来说明该区段下的资源。发布后应测试公开回应、内容类型、访问权限和链接。如果通过插件或建置流程生成文件,应将它纳入部署,并指定维护负责人。
提案也讨论了链接页面的 Markdown 版本,例如备用的 .md 网址。这不是必需做法。应评估是否增加重复维护工作,并确保 HTML 页面仍然完整、可抓取且具权威性。不要只在 AI 文件中提供重要事实。
如何评估成效
确认文件可以访问、内容准确,而且对支持它的工具有帮助。如果服务器分析能可靠识别来源,可以衡量引荐流量或请求,但没有可见访问记录,不代表模型一定没有使用文件。没有证据时,不要宣称它提升了 SEO 或 AI 曝光。
常见问题
llms.txt 能提升 Google 排名吗?
Google 表示,AI Search 不需要新增的 AI 文本文件或特殊标记。没有依据可以保证加上 llms.txt 后会提升 Google 排名。
它能控制 AI 爬虫吗?
不能。这是提议信息文件,不是访问控制机制。应使用身份验证、服务器控制和相关爬虫指令管理访问。
ChatGPT、Gemini 或其他 AI 系统会读取它吗?
不要假设它们会读取。各产品的支持情况不同,也可能改变。请查看相关工具的最新文档。
每家企业都应该发布吗?
不需要。只有当精选索引能帮助明确的用户或代理工作流程,而且有人负责维护时才值得发布。结构清楚、方便访问的来源页面仍是首要工作。
结语
把 llms.txt 视为一种可选、仍在发展的惯例。它可以为选择使用它的代理整理链接,但不能取代优质页面、搜索控制或以证据为基础的技术 SEO,也无法保证内容会被发现或引用。
资料核对日期:2026 年 10 月 20 日。 llms.txt 提案第 2 版及 Google 的网站与 AI 功能指引。