改善網站的檢索與索引能力,應先確認搜尋引擎能存取重要網頁與資源,再透過可檢索的站內連結、分頁及 Sitemap,讓內容更容易被找到。同時,也要分清「禁止檢索」與「禁止索引」的設定。以下以 Google 為主:能被檢索不代表一定會建立索引,即使符合搜尋基礎規範,也不保證所有頁面都會收錄。
先查實際檢索紀錄,別只憑未索引比例猜原因
一個約有 3.4 萬頁、約一半顯示「已發現,目前未建立索引」的網站,單憑這些資訊,還無法判定問題出在內容品質、伺服器負載或檢索預算。排查時應先確認 Googlebot 是否實際存取過重要網址,而不是把所有未索引頁面都視為同一種問題。
- 查看伺服器日誌,確認特定網址是否被檢索;有檢索紀錄仍不等於已建立索引。
- 檢查伺服器是否無法回應檢索要求;Googlebot 偵測到這種情況時,會減少檢索次數。
- 考慮發布時間:Google 通常需要數天才注意到新頁面,不應預期當天就完成檢索。
確認重要內容與資源都能被讀取
對於希望收錄在公開搜尋結果中的一般頁面,應檢查是否受到登入限制或 robots.txt 封鎖,也要確認圖片、CSS 等重要資源能否被存取。使用 Search Console 的網址檢查工具查看轉譯結果,確認 Google 看到的內容是否符合預期。
重要文字應存在於 DOM,並盡量採用語意式 HTML。例如,商品分類頁不要只有襯衫圖片,也應提供文字說明。不要只靠 canvas 或 CSS content 呈現關鍵文字。透過 CSS content 新增的內容不屬於 DOM,Google 文件指出,搜尋會忽略這類內容。
提供通往後續頁面的可檢索連結
Google 通常會追蹤 a 元素 href 屬性中的網址,但不會點擊「載入更多」按鈕,也通常不會觸發需要使用者操作的 JavaScript。因此,使用者看得到全部商品,不代表檢索器也能找到。
- 使用無限捲動時,應提供分頁版本,讓各頁透過可檢索連結依序連到下一頁。
- 每頁使用專屬網址,例如 ?page=2,不要只用 #page2 這類網址片段區分頁碼。Google 會忽略網址片段,因此可能漏掉後續內容。
用 Sitemap 協助發現內容,分清檢索與索引設定
Sitemap 可列出重要網頁與更新資訊,對大型、階層複雜或難以透過連結找到內容的網站尤其有幫助,但不保證其中的頁面都會收錄。新增頁面後應更新 Sitemap,也要保留通往重要頁面的站內連結。
若排序或篩選產生不必要的重複清單,應先釐清目的:若要要求搜尋引擎不要檢索符合特定模式的網址,可用 robots.txt;若要禁止建立索引,則使用 noindex。不要把 robots.txt 當成禁止索引的工具。與其一味追求全站收錄,更應先確認哪些網址真正需要出現在搜尋結果中。
網站檢索與索引的網路各方意見
約 3.4 萬頁的網站需要優先處理檢索預算嗎?
付費牆內容要讓 Google 建立索引,該注意什麼?
分頁還需要依靠 rel=next 和 rel=prev 嗎?
對 Google 而言,不需要。Google 已不再使用 rel=next 和 rel=prev 識別前後頁關係,因此不應只依靠這些標記讓 Google 找到後續頁面,而應提供指向下一頁的可檢索連結。其他搜尋引擎可能仍使用這些標記,是否保留可視網站希望支援哪些搜尋引擎而定。
能否付費請 Google 加快檢索,讓所有頁面收錄?
不行。Google 表示不接受以付費方式增加網站檢索頻率或提高排名;即使頁面符合搜尋基礎規範,也不保證一定被檢索、建立索引或顯示在搜尋結果中。因此,對於承諾付費即可讓所有頁面收錄的說法,應特別審慎。
參考資料
- 什麼是 Sitemap | Google 搜尋中心 | Documentation | Google for Developersdevelopers.google.com — 本文論述的參考來源。
- 技術性搜尋引擎最佳化 (SEO) 技巧與策略 | Google 搜尋中心 | Documentation | Google for Developersdevelopers.google.com — 討論:約 3.4 萬頁的網站需要優先處理檢索預算嗎?
- Google 建議的分頁最佳做法 | Google 搜尋中心 | Documentation | Google for Developersdevelopers.google.com — 討論:分頁還需要依靠 rel=next 和 rel=prev 嗎?
- 訂閱和付費牆內容標記 | Google 搜尋中心 | Documentation | Google for Developersdevelopers.google.com — 討論:付費牆內容要讓 Google 建立索引,該注意什麼?
- 詳盡指南:Google 搜尋的運作方式 | Google 搜尋中心 | Documentation | Google for Developersdevelopers.google.com — 討論:付費牆內容要讓 Google 建立索引,該注意什麼?;能否付費請 Google 加快檢索,讓所有頁面收錄?
- 網頁程式開發人員的搜尋引擎最佳化 (SEO) 指南 | Google 搜尋中心 | Documentation | Google for Developersdevelopers.google.com — 本文論述的參考來源。
- 排解 Google 搜尋檢索錯誤 | Google 搜尋中心 | Documentation | Google for Developersdevelopers.google.com — 討論:約 3.4 萬頁的網站需要優先處理檢索預算嗎?



