如何改善網站的檢索與索引能力?先排除存取障礙,再讓內容更容易被找到

ProcrustesPR

改善網站的檢索與索引能力,應先確認搜尋引擎能存取重要網頁與資源,再透過可檢索的站內連結、分頁及 Sitemap,讓內容更容易被找到。同時,也要分清「禁止檢索」與「禁止索引」的設定。以下以 Google 為主:能被檢索不代表一定會建立索引,即使符合搜尋基礎規範,也不保證所有頁面都會收錄。

ProcrustesPRProcrustesPR網站自然流量突然下降,要先查什麼?

先查實際檢索紀錄,別只憑未索引比例猜原因

一個約有 3.4 萬頁、約一半顯示「已發現,目前未建立索引」的網站,單憑這些資訊,還無法判定問題出在內容品質、伺服器負載或檢索預算。排查時應先確認 Googlebot 是否實際存取過重要網址,而不是把所有未索引頁面都視為同一種問題。

  • 查看伺服器日誌,確認特定網址是否被檢索;有檢索紀錄仍不等於已建立索引。
  • 檢查伺服器是否無法回應檢索要求;Googlebot 偵測到這種情況時,會減少檢索次數。
  • 考慮發布時間:Google 通常需要數天才注意到新頁面,不應預期當天就完成檢索。

確認重要內容與資源都能被讀取

對於希望收錄在公開搜尋結果中的一般頁面,應檢查是否受到登入限制或 robots.txt 封鎖,也要確認圖片、CSS 等重要資源能否被存取。使用 Search Console 的網址檢查工具查看轉譯結果,確認 Google 看到的內容是否符合預期。

重要文字應存在於 DOM,並盡量採用語意式 HTML。例如,商品分類頁不要只有襯衫圖片,也應提供文字說明。不要只靠 canvas 或 CSS content 呈現關鍵文字。透過 CSS content 新增的內容不屬於 DOM,Google 文件指出,搜尋會忽略這類內容。

提供通往後續頁面的可檢索連結

Google 通常會追蹤 a 元素 href 屬性中的網址,但不會點擊「載入更多」按鈕,也通常不會觸發需要使用者操作的 JavaScript。因此,使用者看得到全部商品,不代表檢索器也能找到。

  • 使用無限捲動時,應提供分頁版本,讓各頁透過可檢索連結依序連到下一頁。
  • 每頁使用專屬網址,例如 ?page=2,不要只用 #page2 這類網址片段區分頁碼。Google 會忽略網址片段,因此可能漏掉後續內容。

用 Sitemap 協助發現內容,分清檢索與索引設定

Sitemap 可列出重要網頁與更新資訊,對大型、階層複雜或難以透過連結找到內容的網站尤其有幫助,但不保證其中的頁面都會收錄。新增頁面後應更新 Sitemap,也要保留通往重要頁面的站內連結。

若排序或篩選產生不必要的重複清單,應先釐清目的:若要要求搜尋引擎不要檢索符合特定模式的網址,可用 robots.txt;若要禁止建立索引,則使用 noindex。不要把 robots.txt 當成禁止索引的工具。與其一味追求全站收錄,更應先確認哪些網址真正需要出現在搜尋結果中。

ProcrustesPRProcrustesPR社群貼文放回網站,會因為重複內容被扣分嗎?

網站檢索與索引的網路各方意見

約 3.4 萬頁的網站需要優先處理檢索預算嗎?

不一定。不能只憑約 3.4 萬頁的規模或未索引比例,就認定網站的檢索預算不足。Google 提及需要管理檢索預算的情境,是規模特別大、內容定期或經常變更的網站。應先檢查實際檢索紀錄與伺服器狀況,再決定是否要優先處理檢索預算。

付費牆內容要讓 Google 建立索引,該注意什麼?

如果希望 Google 檢索付費牆內容並建立索引,必須讓 Googlebot,以及適用時的 Googlebot-News,能夠存取網頁。可使用網址檢查工具測試 Google 檢索及轉譯網址的情形,確認希望被讀取的內容是否可見;允許存取並不保證一定建立索引。

分頁還需要依靠 rel=next 和 rel=prev 嗎?

對 Google 而言,不需要。Google 已不再使用 rel=next 和 rel=prev 識別前後頁關係,因此不應只依靠這些標記讓 Google 找到後續頁面,而應提供指向下一頁的可檢索連結。其他搜尋引擎可能仍使用這些標記,是否保留可視網站希望支援哪些搜尋引擎而定。

能否付費請 Google 加快檢索,讓所有頁面收錄?

不行。Google 表示不接受以付費方式增加網站檢索頻率或提高排名;即使頁面符合搜尋基礎規範,也不保證一定被檢索、建立索引或顯示在搜尋結果中。因此,對於承諾付費即可讓所有頁面收錄的說法,應特別審慎。

ProcrustesPR文章發了,為什麼 Google 還找不到?

參考資料

  1. 什麼是 Sitemap | Google 搜尋中心  |  Documentation  |  Google for Developersdevelopers.google.com — 本文論述的參考來源。
  2. 技術性搜尋引擎最佳化 (SEO) 技巧與策略 | Google 搜尋中心  |  Documentation  |  Google for Developersdevelopers.google.com — 討論:約 3.4 萬頁的網站需要優先處理檢索預算嗎?
  3. Google 建議的分頁最佳做法 | Google 搜尋中心  |  Documentation  |  Google for Developersdevelopers.google.com — 討論:分頁還需要依靠 rel=next 和 rel=prev 嗎?
  4. 訂閱和付費牆內容標記 | Google 搜尋中心  |  Documentation  |  Google for Developersdevelopers.google.com — 討論:付費牆內容要讓 Google 建立索引,該注意什麼?
  5. 詳盡指南:Google 搜尋的運作方式 | Google 搜尋中心  |  Documentation  |  Google for Developersdevelopers.google.com — 討論:付費牆內容要讓 Google 建立索引,該注意什麼?;能否付費請 Google 加快檢索,讓所有頁面收錄?
  6. 網頁程式開發人員的搜尋引擎最佳化 (SEO) 指南 | Google 搜尋中心  |  Documentation  |  Google for Developersdevelopers.google.com — 本文論述的參考來源。
  7. 排解 Google 搜尋檢索錯誤 | Google 搜尋中心  |  Documentation  |  Google for Developersdevelopers.google.com — 討論:約 3.4 萬頁的網站需要優先處理檢索預算嗎?

更多相關討論

網站自然流量突然下降,要先查什麼?社群貼文放回網站,會因為重複內容被扣分嗎?文章發了,為什麼 Google 還找不到?舊文章沒有排名,該重寫還是繼續更新?自己做 SEO,應該從哪裡開始?SEO 做多久才可以判斷成效?新手做 SEO 八大關鍵 – 網站收錄篇下架商品產生的 404 頁面,會影響搜尋排名嗎?
ProcrustesPR
ProcrustesPR