Steam 和 itch.io 的 robots.txt 擋了 AI 爬蟲嗎?
沒有。2026-11-09 我們讀了兩家的 robots.txt:都只對所有爬蟲(User-agent: *)禁了結帳、下載、嵌入、站內搜尋這類功能頁,遊戲詳情頁沒有被禁,也沒有點名任何 AI 爬蟲。
| 網站 | robots.txt 對所有爬蟲禁止的路徑 | 遊戲詳情頁 | Sitemap |
|---|---|---|---|
| store.steampowered.com | /share/ · /news/externalpost/ · /widget/ · /email/ · /account/ackgift/ · /login/?*guestpasskey= · /join/?*redir= · /account/emailoptout/?*token= · /account/notificationsettings/?*token= | /app/… Allow | robots.txt 裡沒寫 |
| itch.io | /embed/ · /embed-upload/ · /search · /checkout/ · /game/download/ · /bundle/download/ · /register-for-purchase/ · /email-feedback/ | Allow | itch.io/sitemap.xml |
注意 itch.io 禁了 /embed/ 和 /embed-upload/:網頁小遊戲的嵌入播放頁不會被守 robots.txt 規矩的爬蟲讀取,所以遊戲頁上的文字說明就是爬蟲能讀到的全部。
Steam 遊戲頁裡,AI 爬蟲讀得到什麼?
讀得到的比較多。我們打開了一個 Steam 遊戲頁(Hollow Knight):HTML 約 156 KB,每個遊戲有自己的 title 和 og:title、一段 og:description 簡介、封面圖,價格和評分以 itemprop 微資料寫在頁面裡,遊戲簡介和詳情文字直接在 HTML 裡,沒有 JSON-LD。我們用 OAI-SearchBot 和 ClaudeBot 的 User-Agent 字串請求都得到 HTTP 200;這是模擬請求,不是真實爬蟲取到的。
| 我們查到的 | 結果(2026-11-09) |
|---|---|
| title 和 og:title | Hollow Knight on Steam |
| 簡介 | og:description 是遊戲自己的簡介;詳情文字也在 HTML 裡 |
| 價格和評分 | itemprop: offers, price, priceCurrency, aggregateRating, ratingValue, reviewCount |
| 結構化資料 | 沒有 JSON-LD |
| AI 是否引用這些頁面 | 未核實 |
所以 Steam 頁上要認真寫的是簡介:開頭一兩句說清玩法、類型、平台、語言。這是 AI 和玩家都先讀到的部分。
itch.io 的遊戲頁 HTML 我們沒讀到:用模擬的爬蟲 User-Agent 請求,回傳 403 或 429,看到後就停了,沒有再試。它的標題、描述和結構化資料,未核實。
遊戲官網該放什麼,AI 才引用得了?
官網是你唯一能完全控制、能放結構化資料的頁面。商店頁的版式你改不了,官網要補上商店沒說清的東西,並且和商店簡介保持一致。
| 內容 | 怎麼寫 | 為什麼 |
|---|---|---|
| 第一段 | 一句話定義:類型、玩法核心、平台、發售日期。例:「Example Quest 是一款解謎平台遊戲,支援 PC 和瀏覽器,2026 年 10 月發售。」 | AI 回答「有什麼 X 類型的遊戲」時需要的就是這一句 |
| 商店連結和價格 | Steam、itch.io 等連結寫成文字連結,價格寫數字和幣別 | 價格只放在圖片裡,爬蟲讀不到 |
| 系統需求和支援語言 | 用表格列出最低配備、作業系統、支援的語言、手把支援 | 這是玩家常問、商店頁欄位又不一定寫全的資訊 |
| 玩法說明和操作鍵位 | 寫成文字和表格,不要只放在預告片裡 | 影片裡的內容爬蟲讀不到 |
| 新聞稿資料頁 | 遊戲簡介、發售日期、開發者名字、聯絡方式、截圖下載、預告片連結 | 媒體寫評測和推薦文章時會引用;這些文章又是 AI 的來源之一 |
| 開發日誌 | 每次更新寫日期和改了什麼 | 讓頁面有明確的更新時間 |
{
"@context": "https://schema.org",
"@type": "VideoGame",
"name": "Example Quest",
"description": "Same sentence as the first paragraph of this page.",
"genre": "Puzzle platformer",
"gamePlatform": ["PC", "Web browser"],
"applicationCategory": "Game",
"operatingSystem": "Windows, macOS, Linux",
"datePublished": "2026-10-01",
"url": "https://example.com/example-quest/",
"offers": { "@type": "Offer", "price": "9.99", "priceCurrency": "USD", "url": "https://store.steampowered.com/app/APP_ID/" }
}
上面是 schema.org 的 VideoGame 類型範例,網址和名字是占位。結構化資料的寫法和限制見 結構化資料對 AI 搜尋有用嗎?;對比類頁面見 比較頁怎麼寫。
網頁小遊戲(HTML5、瀏覽器遊戲)要補什麼?
遊戲本體通常是 canvas 或 WebGL,爬蟲讀不到裡面的任何文字,所以要在遊戲周圍補一頁能讀的說明。是否執行腳本見 AI 爬蟲會執行 JavaScript 嗎?。
1. 遊戲頁上方或下方寫一段文字
玩法、目標、操作方式、預計一局多長時間、支援的裝置。
2. 把遊戲放在自己的網域下
只放在第三方平台的嵌入頁裡,爬蟲按 robots.txt 讀不到嵌入頁(例如 itch.io 禁了 /embed/)。自己的網域上有文字說明,再連結到平台頁。
3. 寫一頁「怎麼玩」和一頁更新記錄
每頁一個問題,開頭直接回答。
4. 標題唯一
每個遊戲頁有自己的 title 和描述,不要全站用同一個。
做完後怎麼檢查?
| 項目 | 怎麼查 |
|---|---|
| 官網沒有擋住 AI 爬蟲 | 用 AI 爬蟲檢查工具;規則見 robots.txt 指南 |
| 正文直出 | curl 官網首頁,搜一句正文 |
| 商店簡介和官網首段意思一致 | 兩邊各讀一遍 |
| 一個月後問 AI | 問「有什麼 X 類型的獨立遊戲」,看有沒有提到你、引用了哪些網址 |
工具見 AI 爬蟲檢查,規則見 AI 爬蟲的 robots.txt 怎麼寫?。
遊戲的外部聲音也影響推薦:預告片見 YouTube 影片會出現在 AI 回答裡嗎?,玩家討論見 Reddit 為什麼常被 AI 引用?,媒體評測見 評測站對 AI 推薦有用嗎?。手機遊戲的商店頁問題見 App 怎麼讓 ChatGPT 推薦?。
做的是 Unity 資源或工具的話,Asset Store 的 robots.txt、sitemap、資源頁實測和官方 Submission Guidelines 見 Unity Asset Store 上的資源怎麼被 AI 搜尋找到?資源頁實測與官方規定。
做的是 Minecraft 模組、資源包或伺服器外掛的話,Modrinth 和 CurseForge 的實測和官方要求見 Minecraft 模組怎麼被 AI 搜尋找到?。
常見問題
Steam 頁面會被 ChatGPT 引用嗎?
我們沒有找到官方說明,也沒有拿到實際引用的證據,未核實。能確認的是:Steam 的 robots.txt 沒有擋遊戲頁,頁面 HTML 裡有遊戲的標題、簡介、價格和評分(2026-11-09 實測)。
itch.io 的遊戲頁會被 AI 讀到嗎?
itch.io 的 robots.txt 沒有禁遊戲頁,但我們用模擬的爬蟲請求遊戲頁得到 403 或 429,沒有讀到頁面內容,所以未核實。
沒有官網,只有 Steam 或 itch.io 頁面,夠嗎?
可以先從商店簡介寫好開始,但官網是唯一能放結構化資料、對比頁和新聞稿資料的地方。一個單頁網站就夠:定義、平台、價格、系統需求、商店連結、聯絡方式。
網頁小遊戲需要寫文字說明嗎?
需要。遊戲本體是 canvas 或 WebGL,爬蟲讀不到裡面的文字。在遊戲周圍寫玩法、操作和更新記錄。
結構化資料用什麼類型?
schema.org 有 VideoGame 類型,可以寫類型、平台、作業系統、發售日期和價格。欄位要和頁面正文一致。哪些 AI 會讀取它,官方沒有說明。
出處
- Steam · store.steampowered.com/robots.txt (2026-11-09 讀取)
- itch.io · itch.io/robots.txt (2026-11-09 讀取)
- Steam · 示例游戏页(用来查 HTML 里有什么) (2026-11-09 讀取)
- schema.org · VideoGame (查看於 2026-11-09)
- kagentx 評測:案例頁的資料,日期寫在每個例子裡。