為了抓取盡可能多的頁面,搜尋引擎會自動跟蹤頁面連結,通常採用廣度優先或深度優先兩種遍歷方法。理論上,只要給蜘蛛足夠時間,都能抓到網站內容;但實際上,蜘蛛的頻寬與伺服器資源都有限,因此它往往只能抓取網路頁面的一小部分,還有大量頁面鞭長莫及。
那麼,在網站激烈競爭的局面下,如何吸引蜘蛛來提高收錄呢?SEO 學堂認為,既然蜘蛛抓不全,它就會優先抓取那些「重要」的頁面。哪些頁面會被它視為重要?有以下幾點影響因素:
高權重、內容更新快且質量高、資格老的網站,會被優先考慮抓取,首頁與內頁都會被大量收錄,快照更新也快。
更新效率快的網站。蜘蛛一旦把你的站點納入資料庫並產生信任,就會經常回訪查看更新;若有新內容與新連結,收錄更新速度也會相應提高,反之則大打折扣。
導入連結多且廣泛。頁面要有導入連結,蜘蛛才有機會知道它的存在;導入連結越多越廣,蜘蛛爬行的深度也相應增加。
首頁連結權重相對較大。蜘蛛普遍認為首頁權重最高,因此離首頁越近的頁面,權重越高,被爬行收錄的機率也越大。
學 SEO 是為了用好 SEO。從蜘蛛爬行原理出發,新站若想被快速收錄,就應提高更新頻率、多產出高質量文章,同時廣泛發展外鏈、做好站內連結優化。如此,蜘蛛自然會盡快建立起對你站點的信任,從而提高收錄效率,進一步提升 SEO 關鍵詞排名。
完成本課的 SEOer,也閱讀了網路 SEO 培訓班免費教程系列。