Firefox 附加组件和 Edge 加载项商店,对爬虫开放吗?
都没有拦 AI 爬虫,但差别很大。2026-11-12 我们用 curl 测了两家的 robots.txt 和 sitemap:
| 检查项 | Firefox(addons.mozilla.org) | Edge(microsoftedge.microsoft.com) |
|---|---|---|
| robots.txt | 200,13,735 字节;* 组 Allow: /,只禁下载路径,以及各语言目录下的搜索和合集页;没有点名 AI 爬虫,没有 Sitemap 行 | 200,但返回的是 HTML(51,288 字节,没有一条规则),不是 robots.txt;没有 Sitemap 行 |
| sitemap.xml | 200,是索引,里面 8,227 个子 sitemap;每页 2,000 个网址,带 lastmod 和多语言 hreflang;网址形式 /addon/<slug>/ | 200,4,390 个网址,其中 4,336 个是 /addons/detail/<ID>;这只是 sitemap 列出的数量,商店总数未核实 |
| 详情页网址 | 带名称的 slug,例如 /addon/ublock-origin/ | 只有 32 位 ID,网址里没有名称 |
一个值得注意的细节:Edge 的 robots.txt 返回 HTML。Naver 的官方指南写明,这种情况可能被当成没有 robots.txt、全部允许;别的爬虫怎么处理,我们没有核实。
Edge 加载项商店的详情页,爬虫读到什么?
几乎只有标题。我们在 Edge 的 sitemap 里取了三个详情页(2026-11-12,curl,不执行脚本):
| 检查项 | 实测结果 |
|---|---|
| HTTP 状态和大小 | 三个都是 200,约 51 KB |
| <title> | “扩展名 - Microsoft Edge Add-ons”;三个里有一个只有 “Microsoft Edge Add-ons”,没有名称 |
| meta description | 三个页面是同一句商店通用文案:Make Microsoft Edge your own with extensions…,不是扩展自己的简介 |
| canonical、结构化数据、og 标签 | 都没有 |
| 正文 | 去掉脚本后可见文字约 1,100–1,200 字符,全是微软站点的页眉页脚;扩展名只在 <title> 里出现一次,描述、评分、版本都不在 HTML 里 |
所以不执行 JavaScript 的爬虫在 Edge 商店只能读到扩展名;爬虫是否执行脚本见 AI 爬虫会执行 JavaScript 吗?。结论:把关键介绍放在你自己的官网页面上,不要指望商店页带来描述上的信息;对 Chrome 网上应用店的同类实测见 Chrome 扩展怎么被 AI 推荐?。
Firefox 附加组件的详情页呢?
我们没能拿到原始 HTML。2026-11-12 用 curl 请求 ublock-origin、darkreader、privacy-badger17 三个页面,换了 Mozilla/5.0、Chrome 130 和 curl 三种 User-Agent,得到的都是同一个 3,038 字节、标题为 “Client Challenge” 的页面,要求浏览器执行脚本。这是我们这个网络出口的结果,真实搜索爬虫是否同样被挑战,没有核实。
换一个出口用读取工具打开 ublock-origin 页(经过转换和摘要,不是原始 HTML),名称、摘要、用户数、评分、权限、版本、更新日期、分类和标签都在。所以页面对浏览器是完整的,是否服务端直出,未核实。
Firefox 的好处是数据公开:addons.mozilla.org/api/v5/addons/addon/<slug>/ 不需要登录就返回 JSON(ublock-origin 为 137,940 字节)。
| API 字段 | 含义(ublock-origin 的实测值) |
|---|---|
| name、summary、description | 按语言分成字典(name 里有 ar、bg、de、en-US、es-ES 等);description(en-US)2,216 字符 |
| tags、categories | tags 是 ad blocker、anti malware、anti tracker、content blocker、privacy、security;categories 是 privacy-security |
| default_locale | en-US |
| homepage、support_url | 开发者填的网站和支持地址,可以按语言不同 |
| average_daily_users、weekly_downloads、ratings | 用户数 11,480,087;评分 4.8,共 22,293 条评价 |
| promoted | recommended(firefox、android):Mozilla 的推荐标记 |
| is_noindexed | false:这个字段表示列表是否被标成不让搜索引擎收录;你的组件上它是什么值,可以自己查 API |
两家官方对上架字段有什么规定?
| 项目 | Firefox(Mozilla Extension Workshop) | Edge(Microsoft Learn) |
|---|---|---|
| 名称 | 要唯一、有描述性;唯一的名称也带来唯一的 AMO slug | 用扩展名;「Extension name」来自包里的 manifest |
| 简短描述 | 摘要上限 250 字符,越短越好,说清关键功能和好处 | 来自 manifest 的 description 字段,要改就重新上传包 |
| 完整描述 | 不限长度;开头要有力,可用 HTML 格式和项目符号 | 最少 250 字符、最多 10,000 字符,要说明全部功能 |
| 关键词 | 做成标签,在摘要和描述里自然使用,「forcing keywords in won’t help」 | 搜索词(Search terms)可选,最多 21 个词,不显示给用户 |
| 分类 | 选对分类(Categorize well) | 必填 |
| 截图 | 不限数量;建议 1280x800 或 1.6:1;说明写在文字里,不要放进图片 | 最多 6 张,640x480 或 1280x800 |
| 多语言 | 可以本地化列表的几乎所有文字 | 每种语言单独填 |
Firefox 页面没有写日期,我们 2026-11-12 读原文;Edge 的 Learn 页面写着最后更新 2026-08-12。两家都没有写这些字段怎么影响 AI 搜索,所以「哪些字段会被 AI 引用」我们没有证据,未核实。
{
"manifest_version": 3,
"name": "Example Notes Search",
"description": "Search your notes by title and content from the toolbar.",
"version": "1.0.0"
}
上面是写法示例:manifest 的 description 同时是 Edge 的简短描述,所以第一句就写清「做什么、给谁」。
怎么一步一步让组件更容易被找到?
1. 官网写一页,内容比商店页全
商店页格式由别人定,Edge 的页面 HTML 里甚至没有描述。官网这一页写清功能、支持的浏览器、安装步骤、更新日志和隐私说明,并链到 Firefox 和 Edge 的商店页。写法见 title 和 meta description 对 AI 搜索有用吗?。
2. 名称在 Firefox 上要唯一
官方写明唯一的名称带来唯一的 slug,slug 是网址的一部分。
3. 摘要第一句写成一句话定义
「做什么、给谁用、替代什么」,Firefox 限 250 字符,Edge 的描述至少 250 字符,写两个版本。
4. 给 Edge 单独填搜索词和分类
搜索词最多 21 个,用户在商店里搜到你靠它;分类必填。
5. 官网加 SoftwareApplication 数据
描述同一个组件,运行环境写浏览器名;写法见 SaaS 要不要加 SoftwareApplication 结构化数据?。
6. 隔几周用同一组问题再测
问 ChatGPT、Perplexity「有没有做某某的 Firefox 或 Edge 扩展」,每个问题问 3 次,记下有没有提到你、引用了哪些网址。Edge 用户相关的 AI 入口见 怎么让 Microsoft Copilot 推荐我的产品?。
同类的商店对照:Chrome 扩展怎么被 AI 推荐?、VS Code 扩展怎么被 AI 推荐?、Raycast 扩展怎么被 AI 搜索找到?。
常见问题
Edge 加载项商店的页面会被 AI 读到吗?
2026-11-12 实测:详情页的 HTML 里只有扩展名(在 title 里),meta description 是商店通用文案,描述和评分都是脚本渲染的。不执行脚本的爬虫读不到。是否被 AI 引用,未核实。
Firefox 附加组件的页面是服务端直出的吗?
未核实。我们的 curl 三种 User-Agent 都只拿到一个 “Client Challenge” 页面;用读取工具打开则是完整页面。
Edge 的 robots.txt 为什么是 HTML?
我们实测 microsoftedge.microsoft.com/robots.txt 返回 200 和 HTML 外壳,没有规则。原因我们没有核实。
Firefox 摘要和 Edge 描述各有多少字?
Firefox 摘要上限 250 字符;Edge 的描述最少 250、最多 10,000 字符,简短描述来自 manifest 的 description 字段。
关键词应该怎么填?
Firefox 把关键词做成标签,并自然地用在摘要和描述里,官方写明硬塞没用;Edge 的搜索词最多 21 个词,不显示给用户。
要不要在商店里放官网链接?
要。Firefox 的 API 里有 homepage 和 support_url 字段;Edge 的属性页有可选的 Website。官网是你能写全介绍的地方。
怎么看自己的 Firefox 组件是不是被标成不让收录?
打开 addons.mozilla.org/api/v5/addons/addon/<你的 slug>/,看 is_noindexed 字段。我们只在 ublock-origin 上看到 false。
和 Chrome 网上应用店有什么不同?
Chrome 的详情页有直出的标题和简介,详见另一篇指南;Edge 只直出标题;Firefox 我们没拿到原始 HTML。
出处
- Mozilla · addons.mozilla.org/robots.txt and sitemap.xml (2026-11-12 读取)
- Mozilla · AMO API v5: example add-on (checked for fields) (2026-11-12 读取)
- Mozilla · Create an appealing listing (2026-11-12 读原文,页面没有日期)
- Microsoft Edge · microsoftedge.microsoft.com/robots.txt, sitemap.xml and three detail pages (2026-11-12 读取)
- Microsoft Learn · Publish an extension in the Microsoft Edge Add-ons website (2026-11-12 读原文,页面标最后更新 2026-08-12)
- kagentx 评测:案例页的数据,日期写在每个例子里。