使用者頁面數量超過單一 Sitemap 上限時,如何讓搜尋引擎知道這些頁面?

ProcrustesPR

使用者頁面超過單一 Sitemap 上限時,應將網址拆分到多份 Sitemap,而不是全部塞進同一份檔案。依 Google 官方文件,可以用 Sitemap 索引檔列出各份檔案的位置,再提交索引檔;也可以分別提交多份 Sitemap。這能幫助搜尋引擎發現頁面,但不保證所有頁面都會被收錄。以下提交方式以 Google 為主。

ProcrustesPRProcrustesPR網站自然流量突然下降,要先查什麼?

上限看網址數,也看未壓縮大小

Google 文件列出的單一 Sitemap 限制是:未壓縮檔案大小不得超過 50 MB,且網址數不得超過 50,000 個。任何一項超限,都必須拆分。因此,即使網址尚未達到五萬個,也仍要檢查檔案大小;即使檔案經過壓縮,也要以未壓縮的大小為準。

  • 網址數超限:把網址分配到多份 Sitemap。
  • 檔案大小超限:即使網址數未超限,也要繼續拆分。
  • 拆分完成後:逐份確認是否符合兩項限制,而非只檢查其中一份。

用索引檔管理多份 Sitemap

Sitemap 列的是頁面網址;Sitemap 索引檔列的則是各份 Sitemap 的位置。網站成長後,可以在索引檔中加入新增檔案的位置,再將索引檔提交給 Google。官方文件也允許提交多份 Sitemap 與多份索引檔,因此使用索引檔是管理方式之一,並非唯一途徑。

例如,假設有六萬個要列入的頁面網址,可分成各三萬個網址的兩份 Sitemap,再由一份索引檔列出兩者;但兩份檔案仍須各自符合大小限制。這只是分配示例,不是官方要求每份固定放三萬個網址。

動態網站先規劃分組,再檢查各組的網址數與檔案大小

即使目前尚未超限,也可以先規劃日後如何分檔。公開技術討論曾提出按使用者分組產生 Sitemap;這是實作建議,不是官方規則。由於每位使用者新增的頁面數可能不同,不能只看每組有多少使用者,仍須核對該組的網址總數與檔案大小是否符合限制。

另一則公開討論認為,即使起初只有一份 Sitemap,先採用索引檔也較方便日後擴充;這是維護上的考量,不代表有助於頁面收錄。

製作各份 Sitemap 時也別忽略基本格式:Google 文件要求使用 UTF-8 編碼與完整絕對網址,並建議把 Sitemap 放在網站根目錄。若未透過 Search Console 提交,還須留意 Sitemap 的存放位置會限制它可涵蓋的目錄範圍。

ProcrustesPRProcrustesPR社群貼文放回網站,會因為重複內容被扣分嗎?

使用者頁面 Sitemap 的網路各方意見

除了提交給 Google,還有人建議用什麼方式讓搜尋引擎找到拆分後的 Sitemap?

一則較早的技術討論建議,將使用者分組產生多份 Sitemap,並在 robots.txt 中列出各檔位置。另一篇文章則提醒,這樣做可能讓他人得知網站的重要檔案與頁面數量。兩者著眼點不同:前者考慮公布分檔,後者考慮資訊揭露;這些建議不應直接當成現行平台規則。

需要登入才能看的使用者頁面,列入 Sitemap 就能被收錄嗎?

不能因此認定會被收錄。公開討論指出,原則上 Google 無法收錄需要帳號密碼登入的後台頁面;提供 Sitemap 是告知頁面位置,並不能取代搜尋引擎對頁面內容的存取。若使用者頁面也有登入限制,應先確認搜尋引擎實際能否存取,而非只檢查網址是否已列入。

分檔後,網址順序或重複出現會讓搜尋引擎提早停止讀取嗎?

一則技術討論認為,搜尋引擎不會只因網址的新舊排序,或網址曾出現在其他 Sitemap 中,就停止讀取。該回答也提醒,檔案超過允許大小或有 XML 錯誤,可能影響讀取。這是討論者的說法,不代表所有搜尋引擎在所有情況下都會完整讀取。

ProcrustesPR文章發了,為什麼 Google 還找不到?

參考資料

  1. 建立並提交 Sitemap | Google 搜尋中心  |  Documentation  |  Google for Developersdevelopers.google.com — 本文論述的參考來源。
  2. Should sitemaps list their dynamic data, newest first or oldest first?webmasters.stackexchange.com — 討論:分檔後,網址順序或重複出現會讓搜尋引擎提早停止讀取嗎?
  3. Re: [問題] Google Search Console搜尋資源設定www.ptt.cc — 討論:需要登入才能看的使用者頁面,列入 Sitemap 就能被收錄嗎?
  4. Sitemap 是什麼?讓 Google 爬蟲快速了解你的網站!www.awoo.ai · 2022-10-06T09:41:23+00:00 — 本文論述的參考來源。
  5. Sitemap是什麼?一次搞懂網站地圖提交www.da-vinci.com.tw · 2021-08-17T20:33:00+08:00 — 討論:除了提交給 Google,還有人建議用什麼方式讓搜尋引擎找到拆分後的 Sitemap?
  6. Sitemaps index submissionwebmasters.stackexchange.com — 本文論述的參考來源。
  7. Proper sitemap.xml setupwebmasters.stackexchange.com — 討論:除了提交給 Google,還有人建議用什麼方式讓搜尋引擎找到拆分後的 Sitemap?

更多相關討論

網站自然流量突然下降,要先查什麼?社群貼文放回網站,會因為重複內容被扣分嗎?文章發了,為什麼 Google 還找不到?舊文章沒有排名,該重寫還是繼續更新?自己做 SEO,應該從哪裡開始?SEO 做多久才可以判斷成效?新手做 SEO 八大關鍵 – 網站收錄篇下架商品產生的 404 頁面,會影響搜尋排名嗎?
ProcrustesPR
ProcrustesPR