我们的四个站有没有 llms.txt?有多大?
2026-11-12 我们用 curl 读了四个站的 /llms.txt。三个站有,kagentx.com 自己没有:
| 站 | /llms.txt 状态 | 大小(字节) | 条目数 | sitemap 网址数 | 条目覆盖 sitemap 的比例 |
|---|---|---|---|---|---|
| mochistamp.com | 200 | 98,063 | 250 | 1,020 | 25% |
| gammaslide.com | 200 | 55,645 | 130(不同网址 119) | 156 | 76% |
| pagent.kagentx.com | 200 | 36,321 | 120 行(不同网址 143) | 188 | 76% |
| kagentx.com | 404 | (没有) | (没有) | (本篇没有统计) | (没有) |
比例 = 文件里不同网址数 ÷ sitemap 里的网址数,只是粗略的比较;条目数按以“- [”开头的行数,Pagent 的排行榜用的是别的写法,所以另给了不同网址数。kagentx.com 是我们卖诊断的站,它自己的 /llms.txt 返回 404,所以这篇的“有 llms.txt 的站”只有另外三个。
这三份文件里写了什么?
| 站 | 开头 | 主体 | 特点 |
|---|---|---|---|
| MochiStamp | H1、一段简介、一行七种语言的首页 | 7 个 H2,每种语言一节,每节 32 到 41 条「标题加一句说明」 | 按语言分节,每条都有一句说明 |
| Gamma AI Slide | H1、一段简介和价格说明 | 8 个 H2:功能、问答、阿语和波斯语常见问题、页面、各语言入口、指南(102 条)、录制示例 | 混了问答和链接 |
| Pagent | H1、一段简介、一句写给 AI 的使用说明 | 5 个 H2:测试方法、排行榜、报告(115 条)、数据、怎么申请测试 | 开头直接告诉 AI 怎么引用 |
可以看出,三个站没有统一格式:一个按语言分节,一个混了问答,一个在开头写了给 AI 的使用说明。MochiStamp 的 llms.txt、Gamma AI Slide 的 llms.txt、Pagent 的 llms.txt 都可以直接打开对比。
官方说 llms.txt 有用吗?
官方说法的完整对照表在 llms.txt 是什么?有用吗?。这里只放今天(2026-11-12)重新打开页面读到的三条:
| 谁 | 页面里写了什么 | 页面和日期 |
|---|---|---|
| Google Search Central | 可以忽略 llms.txt:Google Search 自己不使用它;为别的服务创建它,不会伤害也不会帮助你在 Google 搜索里的可见度和排名 | 生成式 AI 优化指南,页面标注 2026-07-10 更新 |
| OpenAI、Perplexity | 两家都在自己的文档站发布了 llms.txt(OpenAI 6,201 字节,Perplexity 43,170 字节),但爬虫文档页里没有写它们的搜索爬虫会读别人网站的 llms.txt | 爬虫文档页,2026-11-12 查看 |
| Bing | 网站管理员指南页里没有出现 llms.txt | Bing 网站管理员指南,2026-11-12 查看 |
Anthropic 的爬虫说明我们今天没有重查,所以不写。没有写,不等于他们不读,也不等于读:官方没说。
能证明它带来了 AI 流量吗?
不能。下面是 2026-10-14 至 11-10 我们能从 GA4 里看到的 AI 来源会话,以及我们没有的东西:
| 站 | 整站会话 | 来自 chatgpt.com 的会话 | 有 llms.txt |
|---|---|---|---|
| MochiStamp | 591 | 86 | 有 |
| Gamma AI Slide | 319 | 46 | 有 |
| Pagent | 6 | 0 | 有 |
| kagentx | 108 | 0 | 没有 |
这张表不能说明 llms.txt 有用或没用,原因有四个:
- 没有“加之前和加之后”的对照:我们没有回溯每个站的 llms.txt 是哪天上线的。
- 四个站的内容、流量规模、上线时间都不一样,有 llms.txt 的三个站里也有流量很小的 Pagent。
- 没有服务器日志里 AI 爬虫抓取 /llms.txt 的记录,所以不知道有没有爬虫读过它。
- Search Console 的页面数据里没有 /llms.txt 的曝光记录,这是正常的:它不是给 Google 搜索看的。
另外,MochiStamp 里还有 openai / organic 19 次会话,kagentx 的 108 次里没有 chatgpt.com,但 kagentx 的流量主要是直接访问和本机测试地址,来源结构本来就不同,不能拿来当对照。
那还要不要做?
我们的结论是:可以做,但不要指望它带来推荐。成本是一份要维护的文件,收益目前没有公开证据;Google 明确说不用,其他几家没有说。如果你决定做,按下面几步:
1. 确认 /llms.txt 能直接打开
状态码 200,内容类型是文本(text/plain)。我们四个站里,三个是 200,kagentx.com 是 404。
curl -s -o /dev/null -w "%{http_code} %{content_type} %{size_download}\n" https://your-site.com/llms.txt2. 写成给 AI 看的简介加链接
开头一段说清你是什么、给谁用;之后按主题列链接,每条一句说明。可以用 llms.txt 生成器 生成初稿。
3. 页面改了就同步改
价格、功能、页面网址变了,文件也要改,不然是在给 AI 一份过时的简介。
4. 自己测有没有人读
在服务器日志里搜 AI 爬虫有没有请求过 /llms.txt,方法见 怎么查 GPTBot 等 AI 爬虫有没有来过我的网站?。
grep "llms.txt" access.log | grep -iE "GPTBot|OAI-SearchBot|ClaudeBot|PerplexityBot"
5. 在 GA4 里单独看 AI 来源
这样才知道 AI 带来的会话有多少、是不是在增长,方法见 怎么在 GA4 里看到来自 ChatGPT 的流量?。
这些结论有什么局限?
- 只看了我们自己的四个站,三个有文件的站没有“没有文件”的对照。
- 没有服务器日志数据,所以没有测 AI 爬虫读不读它。
- 官方说法只读了今天能打开的页面,Anthropic 没有重查。
- 流量数字是 GA4 来源的会话,不是用户数,也没有分清 chatgpt.com 会话是点击回答里的链接还是别的路径。
常见问题
llms.txt 会让 ChatGPT 更多推荐我的网站吗?
没有证据。OpenAI 的爬虫文档没有写它的搜索爬虫会读别人网站的 llms.txt,我们的三个有文件的站也没有加之前和加之后的对照。
Google 会用 llms.txt 吗?
Google 的生成式 AI 优化指南页(标注 2026-07-10 更新)写明 Google Search 自己不使用它,也不会因为它改变可见度或排名。
llms.txt 会伤害我的 SEO 吗?
Google 的指南页写明为别的服务创建它不会伤害也不会帮助你在 Google 搜索里的表现。
llms.txt 要写多大?
我们四个站里最大的是 98,063 字节、250 条,最小的 Pagent 是 36,321 字节。没有查到官方的大小上限,所以不给数字,建议只放最重要的页面。
怎么知道 AI 爬虫有没有读我的 llms.txt?
看服务器日志里有没有 AI 爬虫请求 /llms.txt。我们没有这份日志,所以没有测。
为什么 kagentx 自己没有 llms.txt?
2026-11-12 我们读到 kagentx.com/llms.txt 返回 404。这一篇只记录事实,没有对原因做判断。
有 llms.txt 的站,ChatGPT 的会话一定更多吗?
不一定:MochiStamp 86 次、Gamma AI Slide 46 次、Pagent 0 次,三个站的流量规模本来就不同,不能当成因果。
出处
- Google · Guide to optimizing for generative AI features on Google Search (查看于 2026-11-12,页面标注 2026-07-10 更新)
- OpenAI · Overview of OpenAI Crawlers (查看于 2026-11-12)
- Perplexity · Perplexity Crawlers (查看于 2026-11-12)
- Bing · Webmaster Guidelines (查看于 2026-11-12)
- MochiStamp · llms.txt (file read with curl) (2026-11-12 curl 读取)
- Pagent · llms.txt (file read with curl) (2026-11-12 curl 读取)
- MochiStamp · GA4 sessions by source, Oct 14 to Nov 10, 2026 (本机数据看板,2026-11-12 读取)
- kagentx 评测:案例页的数据,日期写在每个例子里。