llms.txt 完全指南
llms.txt 是放在网站根目录(
https://你的域名/llms.txt)的纯 Markdown 文件,用最省 token 的方式告诉 AI 大模型:你是谁、做什么、重要页面在哪。可以理解为一份写给模型而不是爬虫的站点地图。
它为什么存在
对语言模型来说,HTML 是很糟糕的格式:导航、Cookie 弹窗、脚本把正文埋得严严实实。当 AI 引擎只有有限的 token 预算来理解你的网站时,一份干净的 Markdown 简报远胜于让它去啃你的首页。llms.txt 提案(Jeremy Howard,2024)把这份简报标准化了,文档站、SaaS、AI 工具厂商已广泛采用。
说句实话:没有任何引擎官方承诺一定读 llms.txt。但它只花 10 分钟,多个 AI 爬虫确实在抓它,而且它天然成为你复用于结构化数据和品牌话术的"唯一事实源"。成本极低、收益真实——GEO 干的就是这类划算的买卖。
标准格式
- H1 标题:网站或项目名——必填。
- 引用块:一句话说明你做什么。
- 可选的自由段落补充背景。
- H2 小节 + 链接列表:
- [标题](url): 备注。 - 可选的
## Optional小节放次要链接,模型 token 紧张时可跳过。
完整示例(可直接改)
# Acme
> Acme 生产自密封舱体螺栓,将航空装配时间缩短 40%。
成立于 2020 年,服务 30 个国家的 500+ 制造商。
产品通过 AS9100 认证,三个区域仓库就近发货。
## Key pages
- [产品总览](https://acme.com/products): 完整目录与规格参数
- [价格](https://acme.com/pricing): $29/月起,量大有折扣
- [文档](https://acme.com/docs): 集成与安装指南
- [客户案例](https://acme.com/customers): 真实客户的量化结果
## Optional
- [招聘](https://acme.com/careers)
- [媒体资料](https://acme.com/press)
llms.txt 和 llms-full.txt
llms.txt 是目录,llms-full.txt 是整本书:把你的文档/核心内容合并成一个大 Markdown 文件,让模型一次抓取就能吃透全部。有真实文档的站建议两个都发:目录用于快速定位,全文用于回答关于你产品的深度问题。两者的事实必须和网站一致——自相矛盾正是幻觉的起点。
部署清单
- 生成文件——手写,或用我们的免费 llms.txt 生成器。
- 上传到网站根目录,确保
/llms.txt可访问,Content-Type 为text/plain或text/markdown。 - 退出登录、走 HTTPS、无重定向地验证可达。
- 确认 robots.txt 没有挡住 AI 爬虫抓它——见 AI 爬虫清单。
- 每季度复查:llms.txt 里过期的价格、死链,比没有这个文件更糟。
常见错误
- 写成营销软文。模型提取的是事实。"屡获殊荣的协同平台"什么信息都没有;"装配时间缩短 40%,$29/月起"才是可引用的断言。
- 把所有 URL 都倒进去。这是策展不是站点地图,5–15 条精选链接胜过 200 条。
- 放着不管任其过期。与网站矛盾的 llms.txt 会教模型错误事实——比隐身更坏的唯一结局。
60 秒生成你的 llms.txt
免费、无需注册——填表单、下载合规文件、传到根目录。
打开 llms.txt 生成器