llms.txt
部署在网站根目录的标准化文本文件,向 AI 爬虫提供关于网站内容与结构的上下文信息。
定义
llms.txt 是一种标准化文本文件,放置在网站根目录下(可通过 /llms.txt 访问),用于向 AI 爬虫和大语言模型(LLM)提供指引与上下文信息。
背景与目的
随着 AI 搜索引擎开始大规模爬取互联网,业界对一种与其通信的标准化方式产生了需求。robots.txt 可以允许或阻止访问,但无法提供任何上下文信息。
llms.txt 包含哪些内容?
- 对网站及其定位的简要描述
- 重要板块与网址一览
- 编辑方面的背景信息
- 许可信息
- 任何相关限制或偏好
为什么 llms.txt 对 AI 可见性很重要?
- 为 AI 爬虫提供上下文性引导
- 表明网站已主动面向 AI 做好准备
- 让你能够引导哪些信息应优先被采用
如何部署 llms.txt
- 创建一个名为 llms.txt 的纯文本文件
- 撰写对网站简短而精准的描述
- 列出最重要的板块,附带 URL 与说明
- 包含编辑与许可信息
- 上传到网站根目录
- 验证文件可被访问
常见问题
llms.txt 是官方标准吗?
llms.txt 目前是一个提议中的标准,并非由 W3C 或 IETF 正式发布的标准。尽管如此,它已获得业界广泛支持,数千个网站正在使用。
llms.txt 会取代 robots.txt 吗?
不会。robots.txt 控制的是爬虫访问权限;llms.txt 提供的是关于网站内容的上下文信息。两者都应同时使用。
它对 AI 引用是否已有明显效果?
AI 爬虫会读取该文件,而网站运营者也反馈在部署后 AI 索引效果有所提升。作为整体 AEO 策略的一部分,这是一项低成本但潜在影响较大的举措。
相关术语
KR
AI 搜索与增长策略师,拥有 25 年以上数字营销经验。 阅读更多 →