目錄頁會被 AI 引用嗎?
官方沒有說,我們也沒有拿到實際引用的證據,所以不能答「會」。能查清的是前提:目錄頁能不能被爬蟲讀到。2026-11-09 我們用 curl 取了幾類目錄的頁面和 robots.txt(一般 Mozilla/5.0 標識,真實爬蟲看到的可能不同):
| 目錄 | 無登入取頁面 | 原始 HTML 裡有名稱和描述嗎 | GPTBot | ClaudeBot | PerplexityBot |
|---|---|---|---|---|---|
| GPT Store(chatgpt.com/gpts 和 /g/…) | 200 | 沒有:<title> 只是「ChatGPT」,沒有 meta description 和 canonical,GPT 名字搜不到 | Allow | Allow | Disallow(点名整站禁止) |
| Poe 機器人頁(poe.com/GPT-4o) | 200(首页有一次 403 验证页) | 有:<title> 和 meta description 都直出 | Allow(只禁 /p/*) | Disallow(* 组整站禁止) | Disallow(* 组整站禁止) |
| kagentx 產品庫(kagentx.com/p/…) | 200 | 有:title、meta description、canonical,產品頁還有 SoftwareApplication JSON-LD | Allow | Allow | Allow |
讀法:Allow 和 Disallow 是按 robots.txt 的文字推出的,不是真實爬蟲的行為。GPT Store 的兩個位址我們沒有核實是不是仍在線的 GPT,能確認的只有「無登入取到的是同一個應用外殼」;真實爬蟲看到的頁面可能不一樣,未核實。robots.txt 的寫法見 AI 爬蟲的 robots.txt 怎麼寫?,腳本渲染的影響見 AI 爬蟲會執行 JavaScript 嗎?。
這說明兩件事:一是不同目錄差別很大,不是所有目錄頁都讀得到;二是在自己的網站之外掛一個頁面,不等於被 AI 看到了。所以要先查再提交。
該提交哪幾類目錄?
不用一次全做。按下面三類,每類先挑頁面讀得到的:
| 類別 | 例子 | 適合誰 | 提交前先查 |
|---|---|---|---|
| 平台自帶的商店 | GPT Store、Poe | 你本來就在這個平台上做了 GPT 或機器人 | 頁面標題和描述在不在原始 HTML 裡,robots.txt 怎麼寫 |
| AI 工具或 Agent 目錄 | kagentx.com/agents/ | 做 AI 工具、Agent 的獨立開發者 | 條目頁有沒有獨立網址、名稱和描述直出、是否連回你的官網 |
| 評分和榜單站 | pagent.kagentx.com | 產品屬於它評測的品類 | 收錄條件和評分方法寫沒寫清楚,能不能核對每條結果 |
評分站、榜單文章和評測網站另有做法,見 怎麼進「最佳 X 工具」榜單文章? 和 G2、Capterra、Trustpilot 的評論,能讓 AI 更常推薦你嗎?;AI 工具類產品的整體做法見 AI 工具類產品怎麼被 ChatGPT 推薦?。Pagent(可以傳訊息使用的個人 AI 助理評分站) 是我們自己做的一個評分站,英文站,這裡只當例子。
1. 先查頁面讀不讀得到
對目錄裡別人的條目頁跑這幾行:
# Can a crawler read the name and description without logging in? curl -s https://example-directory.com/entry/your-product | grep -io '<title>[^<]*</title>' curl -s https://example-directory.com/entry/your-product | grep -io '<meta name="description"[^>]*>' # What does the directory's robots.txt say about the AI crawlers? curl -s https://example-directory.com/robots.txt | grep -i -A3 -E "gptbot|claudebot|perplexitybot|user-agent: \*"
2. 條目頁必須有指向你官網的連結
連結最好是正文裡的普通連結。這樣 AI 看到目錄條目時,能找到你的原始來源。
3. 只提交與你產品相符的品類
品類選錯,條目會出現在無關的列表裡,對買家沒用。
4. 記一張「在哪裡提交過」的表
寫目錄名、條目網址、提交日期、當時用的描述。後面查一致性、查有沒有收錄時要用。
目錄裡的描述怎麼和自己官網保持一致?
做法是先寫一份統一文案,所有目錄條目和官網共用。統一的是名稱、一句話描述、品類、網址、價格口徑和更新日期:
Name: Example Slides One line: Turns a PDF into an editable slide deck, for students and consultants. Category: Presentation tools URL: https://example.com/ Pricing: Plans listed at https://example.com/pricing/ (checked 2026-11) Updated: 2026-11-09 Same words used on: homepage, About page, every directory entry
三條規則:
1. 官網為準,目錄照抄
官網首頁和 About 頁怎麼寫,AI 才能認對你的公司和產品? 裡用同一句話。目錄條目複製這句話,不要為每個目錄改寫。
2. 價格只寫一個口徑,並連到價格頁
目錄裡不展開價格細節,寫「價格見官網價格頁」並給網址。價格改了,只需要改一處。
3. 每次改產品,回頭查一遍目錄
對照上面那張表,逐個目錄看描述是否還對。過時的描述會被 AI 當作你現在的說法。
kagentx 自己的產品庫是什麼情況?
這是我們自己的一個目錄,下面只寫 2026-11-09 查到的事實,不推斷 AI 是否引用它:
| 項目 | 結果 |
|---|---|
| 產品庫裡的產品條目(web/data/products.json) | 1,155 |
| 其中有完整分析(判斷、價值鏈、競爭、風險四節)、允許收錄的產品頁:線上 /agents/ 列表和 sitemap.xml 裡各有多少 | 141 |
| 其餘產品頁 | 頁面能開啟,但帶 noindex、不進 sitemap(建置腳本 web/scripts/build-agents-seo.mjs 的規則,2026-11-09 讀程式碼) |
| 產品頁 /p/lindy(有完整分析,可收錄) | 無登入 200;伺服器端直出標題、描述、canonical,沒有 robots meta;還有 SoftwareApplication 結構化資料 |
| 產品頁 /p/research-stammer(沒有完整分析) | 無登入 200;伺服器端直出標題、描述、canonical,但帶 noindex, follow(robots meta),不收錄(2026-11-10 再次核對) |
| robots.txt | 對所有爬蟲 Allow: /,只禁 /admin.html、/candidates.html、/api/ |
| Google Search Console | 近 28 天 /p/research-* 的幾個產品頁有曝光(營運資料,這裡不寫具體數字) |
所以能說的是:kagentx 產品庫的頁面在 Google 有曝光,頁面無登入讀得到。這些頁面有沒有被 ChatGPT、Perplexity、Claude 引用過,我們沒有查,未核實。kagentx.com/agents/ 是列表頁。
提交之後怎麼測?
1. 一週內:目錄頁有沒有被收錄
在搜尋引擎裡搜「你的產品名 + 目錄名」,看條目頁出現沒有。
2. 寫下 5 個買家會問的問題
不帶你的品牌名,按買家的說法寫,每個問 3 次並開啟聯網搜尋。
3. 記錄回答和來源
有沒有提到你,來源欄裡有沒有目錄頁。方法和表格見 怎麼衡量 AI 可見度?四個指標與一張可照做的表。
4. 看自己網站的來源資料
GA4 或伺服器日誌裡,看有沒有從目錄頁來的訪問。
ChatGPT 裡由 MCP 伺服器和技能組成的應用程式(官方文件現在叫 plugin)怎麼被找到、怎麼提交審核,見 ChatGPT 裡的應用程式(Apps SDK、外掛目錄)怎麼被使用者和 AI 找到?。
常見問題
GPT Store 的頁面能被搜尋引擎和 AI 讀到嗎?
2026-11-09 我們用 curl 取了 chatgpt.com/gpts 和兩個 GPT 位址:狀態碼 200,但原始 HTML 的標題只是「ChatGPT」,裡面找不到 GPT 的名字和描述。robots.txt 對 GPTBot、ClaudeBot 是放行的,對 PerplexityBot 是整站禁止。真實爬蟲看到什麼,我們未核實。
AI 回答會引用 AI Agent 目錄的頁面嗎?
官方沒有說明,我們也沒有拿到實際引用的證據,未核實。能確認的是前提條件:目錄頁要能無登入讀到,名稱和描述要在原始 HTML 裡,robots.txt 不能攔住爬蟲。
該先提交哪一類目錄?
先挑頁面讀得到的:用上面的 curl 看標題和描述在不在原始 HTML 裡,再看 robots.txt。讀不到的目錄,頁面再好也沒法被爬蟲看到。
目錄裡的描述要和官網完全一樣嗎?
名稱、一句話描述、品類、網址和價格口徑保持一致,其他部分可以不同。不一致時 AI 看到的是幾個互相矛盾的說法,不知道該信哪個。
提交之後怎麼知道有沒有用?
先看目錄頁有沒有出現在搜尋結果裡,再用買家的問題問 AI,看回答和來源裡有沒有你;方法見「怎麼衡量 AI 可見度」。一次的結果不能當結論,同一個問題要多問幾次。
出處
- OpenAI · chatgpt.com/robots.txt (2026-11-09 讀取)
- OpenAI · chatgpt.com/gpts (2026-11-09 讀取)
- Poe · poe.com/robots.txt (2026-11-09 讀取)
- Poe · poe.com/GPT-4o (2026-11-09 讀取)
- kagentx · kagentx.com/agents/ (2026-11-09 讀取)
- kagentx · kagentx.com/sitemap.xml (2026-11-09 讀取)
- kagentx 評測:案例頁的資料,日期寫在每個例子裡。