在传统的搜索引擎时代,我们通过 robots.txt 告诉爬虫哪里不能去;在 GEO(生成式引擎优化,Generative Engine Optimization) 时代,我们需要通过 llms.txt 告诉 AI 哪里最值得读。
什么是 llms.txt?
llms.txt 是一种新兴的标准,位于网站根目录的简易 Markdown 文件。它的核心作用是为大型语言模型(LLM)提供一份机器可读的精选摘要。
与复杂的 HTML 页面相比,llms.txt 为 AI 爬虫(如 OpenAI 的 GPTBot、Anthropic 的爬虫或 Perplexity)提供了极简的上下文,减少了 Token 消耗,并确保 AI 获取的是你最想传达的信息。
为什么你的网站必须拥有 llms.txt?(GEO 视角)
作为 GEO 专家,我建议所有希望在 AI 搜索中获得排名的品牌立即部署此文件,原因有三:
- 消除 AI 幻觉 (Hallucination Control):通过提供结构化的事实,直接降低 AI 错误解读你品牌的风险。
- 提升“索引优先权重” (Indexing Priority):AI 倾向于引用格式整洁、易于解析的源。Markdown 格式是 LLM 的“母语”。
- 优化 AI 引用摘要 (Citations):当 AI 在回答中引用你的网站时,它会优先参考
llms.txt中的描述,这能让你的品牌展示得更专业。
如何创建 llms.txt:专家三步法
第一步:规划内容结构(信息架构)
一个对 LLM 友好的 llms.txt 应该像一份“网站地图的文字版”。它通常包含:
- H1 标题:网站或品牌全称。
- 品牌摘要(Blockquote):用 100 字以内的核心定位描述。
- 核心模块(H2):如“核心产品”、“技术文档”、“关于我们”。
- 深度链接:直接指向关键信息的二级链接。
第二步:编写 Markdown 代码
请参考以下经过优化、符合 AI 抓取偏好的模板:
# 品牌/网站名称 (Brand Name)
> 品牌定位描述:这是一个专注于 [领域] 的 [属性,如开源库/咨询服务/电商平台],致力于解决 [用户痛点]。
## 核心导航 (Core Navigation)
- [产品概览](https://example.com/products): 涵盖 [产品 A] 和 [产品 B] 的详细规格与价格。
- [GEO 优化指南](https://example.com/geo-guide): 我们针对 AI 搜索引擎优化的核心技术文档。
- [最新博客](https://example.com/blog): 行业趋势分析与技术洞察。
## 资源与 API (Developer Resources)
- [API 参考](https://example.com/docs/api): 为 AI 代理 (AI Agents) 提供的集成指令。
- [常见问题 FAQ](https://example.com/faq): 针对 [核心业务] 的快速事实核查。
## 关联文件 (Optional)
- [llms-full.txt](https://example.com/llms-full.txt): 包含所有页面全文的完整版(建议大型站点提供)。
第三步:部署与验证
- 将文件命名为
llms.txt。 - 上传至网站根目录(Root Directory)。
- 最终测试路径:
https://yourdomain.com/llms.txt - (进阶)在 HTML 的
<head>标签中添加链接:<link rel="alternate" type="text/plain" title="LLM Friendly Version" href="/llms.txt">
FAQ:关于 llms.txt 的常见疑问
Q: 它会取代 robots.txt 吗? A: 不会。robots.txt 负责权限控制(能不能爬),llms.txt 负责内容质量(爬什么最有价值)。



