識別索引膨脹,重點不是網站頁數多,而是搜尋引擎是否收錄了大量不值得收錄的網址,例如空白、低品質、重複或內容高度重疊的頁面。可將索引資料、網站爬取結果與 XML 網站地圖交叉比對,再檢查可疑網址的內容是否有價值。未列入網站地圖、沒有內部連結或內容相似,都只是待查線索,不能單憑其中一項就判定有索引膨脹。
先確認檢查範圍,別只看主站
Screaming Frog 的 2021 年文章提醒,稽核範圍應涵蓋 HTTP、HTTPS 與子網域。作者偏好透過 Search Console 的網域資源一併檢視,避免漏掉子網域上的低價值頁面。這是該文的稽核建議,不代表每個子網域都有問題。
接著檢查 XML 網站地圖是否以希望收錄的有價值頁面為主,尤其留意系統自動加入、但實際不希望被收錄的標籤頁與分頁網址。
交叉比對網址,區分可索引與已索引
同一篇文章建議結合網站爬取結果、Analytics 與 Search Console API 資料,補找一般爬取未必能到達的網址,再與網站地圖比對。可整理以下幾類網址:
- 已索引、但未列入網站地圖的網址:逐頁確認是否仍有收錄價值。
- 爬取發現、但不在網站地圖中的網址:先查內容與索引狀態,不直接判為多餘。
- 網站地圖中不可索引的網址:確認頁面目前的狀態是否符合原本希望被收錄的目的。
- 缺少站內連結的孤兒頁:確認內容是否值得保留。
可被索引不等於已被索引。上述清單用來縮小稽核範圍,不能把所有可疑網址都算成索引膨脹。
優先抽查會大量產生網址的頁面類型
檢查篩選條件、站內搜尋結果、追蹤參數、分類、標籤與分頁所產生的網址,也要留意空白頁,以及多篇反覆涵蓋同一主題的文章。依內容相似度篩選,可以協助找出重複或近似頁面,但仍須人工判斷每個頁面是否有獨立價值。
Semrush 的 2019 年文章特別指出,分頁處理不當可能造成索引膨脹,尤其需要留意商品款式、顏色或尺寸繁多的大型電商網站。這不等於所有分頁都不應收錄,也不宜將當年的說明當成現行平台規則。
最後以內容價值判斷,不用單一訊號定案
孤兒頁未必品質低,有價值的頁面可恢復內部連結;多個頁面鎖定同一關鍵字,也不必然有害。應先檢查內容是否缺乏獨立價值、重複或互相競爭,再判斷相關頁面是否屬於不必要的收錄。綜合上述建議,大型且疑似有嚴重索引膨脹的網站應結合多種方法檢查,而非只靠一份網址清單下結論。
索引膨脹的網路各方意見
內容相似度達到多少,才算索引膨脹?
沒有可直接判定膨脹的相似度門檻。Screaming Frog 的 2021 年文章指出,其工具當時預設以 90% 篩選相似頁面,也可調整門檻。這項數值是找出待審頁面的工具設定,不是搜尋引擎規則;仍須確認頁面是否已被索引,以及內容是否有獨立價值。
Search Console 的網址清單足以稽核大型網站嗎?
不宜只依賴單一報表。Screaming Frog 的 2021 年文章指出,文中使用的報表資料依據上次爬取,可能不是最新狀態,且最多列出 1,000 個網址。大型網站可另結合網站爬取、Analytics 與 Search Console 資料,補查爬取未必能到達的網址;這些限制是該文的歷史描述,不能直接視為現行規則。
多個頁面鎖定同一關鍵字,就一定要排除索引嗎?
不一定。Screaming Frog 的 2021 年文章認為,同站多頁針對同一關鍵字並非必然有害:若能同時取得靠前排名,可能是好結果;但頁面也可能互相競爭,導致自然搜尋曝光不佳。應先檢查內容是否重複、各頁是否有獨立價值,再決定是否需要處理。
參考資料
- Conducting an SEO Content Audit: 6 Things You Might Be Overlookingwww.screamingfrog.co.uk · 2021-11-15T13:37:48+00:00 — 討論:內容相似度達到多少,才算索引膨脹?;Search Console 的網址清單足以稽核大型網站嗎?
- Pagination: You’re Doing It Wrong! (Part 1)www.semrush.com · 2019-01-21T09:00:00Z — 本文論述的參考來源。



