如何提供 AJAX 使用體驗,同時避免差別對待爬蟲?

ProcrustesPR

要保留 AJAX fancybox 體驗,又避免差別對待爬蟲,較穩妥的做法是:預設提供能直接開啟產品資訊的一般連結,再用 JavaScript 增強互動,而不是辨識 Googlebot 後,對它採取不同的重新導向方式。即使彈窗與一般頁面的內容相同,也不能保證不同的導向方式就沒有疑慮。不過,現有材料不足以判定這類做法是否違反 Google 現行規則,不能直接將其定性為黑帽 SEO。

ProcrustesPRProcrustesPR網站速度分數一定要做到 100 分嗎?

內容相同,不代表重新導向方式也相同

本文討論的設計是:讓 Googlebot 留在產品頁,卻把其他訪客導回原頁,再透過參數開啟 fancybox。兩者最後可能讀到相同的產品資訊,但存取同一網址時,經歷的重新導向並不一致。

Stack Exchange 的討論提醒,若演算法會比較使用者與機器人看到的內容,以及兩者經歷的重新導向,這類差異仍可能被標記為 cloaking。這是回答者對風險的判斷,不是已證實的現行偵測機制;其重點是「避免刻意分流較安全」,而不是「所有不同呈現都必然違規」。

先讓一般連結正常運作,再加上 AJAX 互動

另一則討論提出的做法更貼近這項需求:讓連結預設指向一般頁面,待 DOM 載入時,再用 JavaScript 調整點擊連結後的行為,改以 AJAX 取得內容。套用到產品資訊,可分成以下三點:

  • 產品連結本身指向可直接閱讀資訊的一般頁面,而非只指向提供 AJAX 資料的程式。
  • JavaScript 的互動增強功能生效時,點擊連結會改以 AJAX 載入內容,並透過 fancybox 顯示。
  • 這項功能未生效時,仍可透過一般連結開啟頁面,不另設 Googlebot 專用路徑。

重點不是讓彈窗與完整頁面的外觀完全一致,而是保留能直接開啟相同資訊的一般連結,再用 AJAX 改善互動。原回答雖以當時的 Webmaster Guidelines 為背景,這裡只採用其實作思路,不把歷史引述當成現行官方承諾。

依 JavaScript 能力分流仍有限制,也要檢查算繪差異

另有回答建議依是否啟用 JavaScript 分流,而非依 Googlebot 身分分流,理由是相同能力的訪客應受到相同處理。但同一討論也提醒,這種技術可能被濫用,最好在沒有其他選擇時才採用。回答中對 Googlebot 與非 JavaScript 版本的假設,不能直接套用到今天。

標示為 2021 年的 Semrush 材料則建議,比較瀏覽器與爬蟲看到的連結、內容及標題,並採用 JavaScript SEO 做法與伺服器端算繪(SSR)來縮小差異。這些建議可作為檢查與改善的方向,但採用 SSR 不代表內容就一定一致,仍須比較實際呈現結果。

ProcrustesPRProcrustesPR新手做 SEO 八大關鍵 – 網站速度篇

AJAX 體驗與爬蟲內容一致性的網路各方意見

依 JavaScript 能力分流,就一定沒有 cloaking 疑慮嗎?

不能一概保證。公開討論中有回答者認為,依是否啟用 JavaScript 提供不同版本,比針對 Googlebot 身分分流更合適,因為能力相同的訪客會受到相同處理。不過,同一討論也提醒,能力分流可能遭垃圾內容利用,建議沒有其他選擇時才使用;其中對品質指南的判斷不能直接視為現行官方規則。

如何檢查瀏覽器與爬蟲看到的內容是否有落差?

先比較瀏覽器與爬蟲實際算繪出的連結、內容與標題,找出差異。2021 年的 Semrush 文章建議遵循 JavaScript SEO 做法並採用伺服器端算繪,以縮小版本差異。改善後仍須重新比較,不能只因採用了伺服器端算繪,就認定所有內容都一致。

彈窗和一般頁面內容相同,為什麼仍要留意重新導向?

因為比較對象可能不只有最後看到的內容,也包括同一網址對使用者與機器人的導向行為。一則公開討論認為,即使內容相同,差別導向仍可能被演算法標記為 cloaking,因此避免針對機器人採取不同待遇較穩妥。這是回答者的風險判斷,不能據此斷言現行系統必然如何偵測或判定。

ProcrustesPRSEO 經驗談,告訴你 SEO 的本質

參考資料

  1. Is it safe to redirect to ajax enabled content if its not google bot visiting?webmasters.stackexchange.com — 討論:彈窗和一般頁面內容相同,為什麼仍要留意重新導向?
  2. The Beginner’s JavaScript Cheat Sheet (Download for Free)www.semrush.com · 2021-09-02T16:46:00Z — 討論:如何檢查瀏覽器與爬蟲看到的內容是否有落差?
  3. Is it safe to redirect to ajax enabled content if its not google bot visiting?webmasters.stackexchange.com — 討論:依 JavaScript 能力分流,就一定沒有 cloaking 疑慮嗎?
  4. Is it safe to redirect to ajax enabled content if its not google bot visiting?webmasters.stackexchange.com — 本文論述的參考來源。

更多相關討論

網站速度分數一定要做到 100 分嗎?新手做 SEO 八大關鍵 – 網站速度篇SEO 經驗談,告訴你 SEO 的本質RWD 與 AWD 如何運作?網站設計該如何選擇?SPA 有哪些效益與開發挑戰?UTF-8 與 Big5 對搜尋排名和使用體驗有何差異?一頁式網頁適合哪些用途,有何優缺點?不同主題該集中一站還是拆站?先看讀者重疊與維護能力
ProcrustesPR
ProcrustesPR