Kimi 是怎么取网页的?
Kimi 官方的爬虫政策页写明了三个爬虫,作用不同(2026-11-06 打开原文核对,页面没有日期):
| 爬虫 | 作用(官方说法) | 拦住以后 |
|---|---|---|
| Kimi-SearchBot | 为 Kimi 的搜索功能分析页面相关性、建索引 | 页面不会出现在 Kimi 搜索结果里 |
| Kimi-User | 用户发起的动作,例如总结某篇文章、回答需要实时取网页的问题 | 官方提醒可能降低在用户指定搜索里的可见度;robots.txt 可能不直接适用 |
| KimiBot | 可能用于训练 Kimi 的基础模型 | 表示内容不用于训练 |
所以想出现在 Kimi 的搜索里,要放行的是 Kimi-SearchBot 和 Kimi-User,拦不拦 KimiBot 只影响训练。放行写法见 AI 爬虫的 robots.txt 怎么写?,最少是这样:
User-agent: Kimi-SearchBot Allow: / User-agent: Kimi-User Allow: /
官方还说:每个子域名是单独的来源,需要自己的 robots.txt;不要按 IP 拦,否则可能连 robots.txt 都读不到。
Kimi 的搜索怎么挑来源?
Kimi 开放平台的联网搜索文档(给开发者的 API)写道:Pro 版返回按相关性排序的网页片段,每个片段带网页标题、链接和站点信息,并有一个表示来源权威程度的 authority 字段。文档没有写底层用哪个搜索引擎,也没有写 authority 怎么算。这是 API 文档,Kimi App 是否同样,官方没写,未核实。
豆包的来源是怎么选的?
我们没有找到豆包官方对 App 里参考资料来源的说明,未核实。能查到的是媒体报道:火山引擎 2026-07-28 上线「豆包搜索」服务,据报道从站点和创作者两个维度建立权威分级,过滤低质信息。我们没有打开火山引擎的官方原文,所以这一条只能当线索,不当事实。
中文内容站应该做什么?
下面分开写:哪些是官方说法,哪些是推断。
| 做法 | 依据 |
|---|---|
| 放行 Kimi-SearchBot、Kimi-User | 官方:Kimi 爬虫政策页 |
| 正文直接写在 HTML 里,价格、功能、一句话介绍不靠脚本 | 推断:Kimi 取网页转成 Markdown 的接口存在,是否执行脚本官方没写 |
| 中文页有独立网址和中文标题,不靠浏览器翻译 | 推断:官方没有写多语言处理;通用做法见多语言指南 |
| 百度、必应都提交收录 | 推断:豆包、Kimi 的搜索是否依赖它们,官方没写;先让页面在主流搜索里能被找到是通用做法 |
| 在中文社区、知乎、公众号上有对产品的如实描述 | 推断:「来源权威分级」来自媒体报道,未核实 |
多语言页面的网址和 hreflang 做法见 多语言网站怎么写 hreflang?AI 搜索怎么处理?;Bing 收录见 Bing Webmaster Tools 怎么设置?导入、sitemap、IndexNow 一步步来。DeepSeek 的情况见 怎么让 DeepSeek 推荐我的产品?。
怎么知道有没有被推荐?
在豆包和 Kimi 里用你的买家会问的问题,开联网搜索,同一个问题问三次,记下有没有提到你、列了哪些参考网页。看三次里出现几次,而不是某一次的回答。
常见问题
Kimi 的爬虫叫什么?
Kimi 官方列了三个:Kimi-SearchBot(搜索索引)、Kimi-User(用户发起的取网页)、KimiBot(可能用于训练)。2026-11-06 核对。
拦住 KimiBot 会让 Kimi 搜不到我吗?
官方说拦 KimiBot 表示内容不用于训练;拦 Kimi-SearchBot 才会不出现在搜索结果里。
豆包会引用哪些网站?
官方没有找到说明,未核实。媒体报道的站点权威分级也没有打开原文核对。
需要做百度收录吗?
这是推断:豆包、Kimi 的搜索是否依赖百度,官方没写。让页面在百度和必应都能被找到是通用做法。
能保证被推荐吗?
不能。回答每次不一样,官方也没有公布排序方式。
出处
- Kimi · Kimi Crawlers (2026-11-06 核对,页面无日期)
- Kimi · 开放平台 · 联网搜索 (2026-11-06 核对)
- kagentx 评测:案例页的数据,日期写在每个例子里。