Googlebot 使用 HTTP/2 爬取網站有何影響?效率與適用條件

ProcrustesPR

Googlebot 使用 HTTP/2 爬取網站,主要影響是提高傳輸效率、減少連線所需資源,並不保證每個網站都會被爬取更多頁面。當時的報導指出,HTTP/2 可透過單一 TCP 連線並行傳輸多個檔案;但伺服器支援 HTTP/2,不代表 Googlebot 一定採用。以下整理當時報導的技術效益與適用條件,這些歷史說法不應視為現行政策。

ProcrustesPRProcrustesPR網站自然流量突然下降,要先查什麼?

效率提升來自較少連線與並行傳輸

WarriorForum 轉述報導並引述 Google 的說明:使用 HTTP/2 時,Googlebot 能在一條 TCP 連線上並行傳輸多個檔案,不必為此建立多條連線。連線較少,伺服器與 Googlebot 用於爬取的資源也較少。

這項改變並非要求網站增加內容,而是改善爬取過程中的傳輸方式,不能直接等同於搜尋排名提升。

相同負載下可能更有效率,但不保證爬取量增加

awoo SEO team 在 2021 年 7 月的文章中認為,Google 啟用 HTTP/2 檢索後,系統可在相同負載下請求更多網址的內容,有助於提升檢索效率,也有益於網站基礎架構。這是該文對當時更新效益的解讀,並非個別網站的成效保證。

  • 可能的效益:並行傳輸與較少連線,有助於降低爬取所需資源。
  • 無法保證的結果:每個網站的爬取量增加多少、多久完成收錄,或排名是否提升;上述報導沒有提供這些結果的直接證據。

因此,「同樣負載可請求更多網址」只表示效率可能提升,不代表網站啟用 HTTP/2 後,就一定獲得更多檢索預算。

伺服器支援,也不代表一定改用 HTTP/2

WarriorForum 當時的轉述指出,即使網站伺服器支援 HTTP/2,如果 Googlebot 使用它爬取沒有益處,仍可能使用 HTTP/1.1。伺服器是否支援 HTTP/2,以及使用 HTTP/2 爬取是否有益,是兩個不同問題。因此,不能只憑伺服器支援 HTTP/2,就判斷 Googlebot 實際使用的協定。

WarriorForum 也轉述 Google 當時的說法:不支援 HTTP/2 的網站無須採取行動,Google 也不會推動站方從 HTTP/1.1 遷移。這只說明當時的安排,不能當成今天的設定指引,也不能據此認為所有網站都必須升級。

ProcrustesPRProcrustesPR社群貼文放回網站,會因為重複內容被扣分嗎?

Googlebot 使用 HTTP/2 爬取網站的網路各方意見

Googlebot 改用 HTTP/2,代表訪客的網頁一定會變快嗎?

不一定。awoo 在 2021 年的文章提到,HTTP/2 並行載入資源可能縮短使用者的等待時間,也談到 Googlebot 檢索效率的變化。但該文沒有證明,Googlebot 採用 HTTP/2 會直接讓訪客載入網頁更快。Googlebot 爬取與訪客載入網頁是不同情境,不能用爬取效率來保證訪客實際感受到的速度。

使用 BlueOnyx 的伺服器會因 Googlebot 使用 HTTP/2 而有安全風險嗎?

材料不足以確認這種風險。論壇使用者 fastreplies 曾表示,這項改變對伺服器、尤其是使用 BlueOnyx 的伺服器是新挑戰,也擔心讓 Google 機器人存取 root 的安全問題。但該留言沒有提供設定細節或證據,不能據此認定 HTTP/2 爬取需要 root 權限,或會造成特定漏洞。

ProcrustesPR文章發了,為什麼 Google 還找不到?

參考資料

  1. Google will crawl some websites over HTTP/2 from November 2020, says Googlewww.warriorforum.com — 本文論述的參考來源。
  2. 2021 Google I/O開發者大會-搜尋行銷重點一次看www.awoo.ai · 2021-07-15T11:07:51+00:00 — 討論:Googlebot 改用 HTTP/2,代表訪客的網頁一定會變快嗎?
  3. Google will crawl some websites over HTTP/2 from November 2020, says Googlewww.warriorforum.com — 討論:使用 BlueOnyx 的伺服器會因 Googlebot 使用 HTTP/2 而有安全風險嗎?

更多相關討論

網站自然流量突然下降,要先查什麼?社群貼文放回網站,會因為重複內容被扣分嗎?文章發了,為什麼 Google 還找不到?舊文章沒有排名,該重寫還是繼續更新?自己做 SEO,應該從哪裡開始?SEO 做多久才可以判斷成效?新手做 SEO 八大關鍵 – 網站收錄篇下架商品產生的 404 頁面,會影響搜尋排名嗎?
ProcrustesPR
ProcrustesPR