爬取資料可協助整理競爭對手在哪些關鍵字取得排名、使用哪些文章標題與中繼資料,以及刊登哪些付費搜尋廣告。將這些資訊與自己網站的資料對照,可作為關鍵字研究與內容規劃的參考。重點是擷取研究所需資訊,而非複製文章或廣告。以下依據 neilpatel.com 於2018年發布的文章整理;工具介面、外掛功能與使用條件都是當時的描述,不代表目前仍可照原步驟操作。
先確定要研究哪些資料
原文建議研究自然搜尋關鍵字、文章中繼資料與 PPC(按點擊付費)廣告。整理時可分成三類,避免把不同用途的資訊混在一起:
- 自然搜尋關鍵字:觀察競爭對手在哪些詞取得排名,作為尋找候選關鍵字的起點。
- 標題與中繼資料:查看對方如何描述文章主題,作為內容規劃的參考,而非直接搬用文字。
- 付費搜尋資料:研究對方購買哪些關鍵字、刊登哪些類型的廣告。
原文也提醒,不要只蒐集競爭對手的資訊,也要爬取自己的網站。例如,同時整理雙方的文章標題及中繼資料,便於後續對照。
整理付費關鍵字,按成本排序後匯出
2018年文章示範如何在 SEMrush 中取得付費關鍵字清單:先在 Advertising Research 中開啟 Positions,再輸入網域,即可查看該網域透過當時稱為 AdWords 的服務購買的關鍵字。接著按 CPC 欄位排序,並匯出為試算表。
這個例子的重點是把付費關鍵字整理成可持續追蹤的清單。按 CPC 排序只能比較該欄位的成本資訊;原文沒有提供轉換或獲利數據,因此不能據此判定哪些詞最值得投放,也不能認為競爭對手買過的詞就一定適合自己。
已有相容工具的資料,再考慮用 Excel 整合
如果已使用相容工具研究關鍵字,可參考原文介紹的 SEOGadget for Excel。依當時的描述,這個外掛可將 SEMrush、Moz 等工具的資料匯入 Excel,自動填入欄位,減少在多個工具間切換的需要。
採用這項做法,前提是已有相容的資料來源,且能取得所需資料。原文雖稱外掛免費,但仍需要 SEMrush 等服務的 API 金鑰,不代表取得資料的整個流程都免費。僅憑這篇文章,無法確認外掛目前是否仍可用,也無從得知現行方案或費用。
把資料用於研究,不要直接重刊他人內容
原文明確區分研究與抄襲:可以擷取關鍵字、標題、中繼資料及廣告資訊來改善行銷,但不應逐字重刊他人文章,或稍作修改便宣稱原創。作者也提醒,抄襲不利於與其他部落格建立關係。這裡著重的是研究與抄襲的區別,並未將作者對搜尋懲罰的說法視為現行 Google 官方規則。
爬取資料進行關鍵字與廣告研究的網路各方意見
如何從搜尋建議擴充候選關鍵字?
2018年文章示範從 Google Suggest、YouTube 搜尋建議等來源蒐集候選詞,產生清單後再去除重複項目。這適合用來擴充初步研究範圍,但清單中的詞仍只是候選項;材料沒有提供足以判斷投放成效的數據,也未確認當時的工具與操作方式目前仍可使用。
網站封鎖爬蟲時,還能研究廣告資料嗎?
仍有可能,但僅憑2018年的文章,無法確認目前能否取得所需的廣告資料。作者當時認為,相較於網站關鍵字或部落格中繼資料,AdWords 廣告資料較不容易遭封鎖,並以 SEMrush 作為研究付費廣告關鍵字的例子。這是當時的比較,不代表所有廣告資料都能取得。
參考資料
- How to Use Content Scrapers to Automate these 7 SEO Hacksneilpatel.com · 2018-02-16T15:00:03+00:00 — 討論:如何從搜尋建議擴充候選關鍵字?;網站封鎖爬蟲時,還能研究廣告資料嗎?




