DIV CSS 佈局教程網

您现在的位置: DIV+CSS佈局教程網 >> 網頁SEO優化 >  >> SEO優化集錦
深入解讀搜索引擎蜘蛛,讓SEO事半功倍
編輯:SEO優化集錦     

搜索引擎蜘蛛,本質上是搜索引擎自身的一段程序,負責訪問網頁、抓取文字圖片等信息、建立數據庫並反饋給引擎。當用戶搜索時,引擎便將收集到的信息過濾,再經複雜的排序算法,把最有用者呈現出來。分析網站的SEO表現時,蜘蛛的抓取質量往往是切入點。以下幾個與抓取相關的概念,正是我們優化時的抓手:

1.爬取率:既定時間內網站被蜘蛛抓取的頁面數。

2.爬取頻率:引擎隔多久對網站或單頁發起一次新爬行。

3.爬取深度:蜘蛛從起點能點擊到多深。

4.爬取飽和度:唯一頁面被抓取的數量。

5.爬取優先:哪些頁面最常作為蜘蛛入口。

6.爬取冗余度:網站通常被多少蜘蛛同時爬取。

7.爬取mapping:蜘蛛爬取路徑的還原。

這幾項,既是數據分析的切口,也能落到SEO實操中。下面談談我的幾點想法。

一、分析爬取率,驗證模糊經驗

分析蜘蛛,首先要看的參數便是爬取量,通常以「一天」為單位來看爬取率。你也可以按需細分,比如按小時統計,摸清各時段的抓取規律,再對症調整。有一類分析頗能帶來成就感——驗證那些「模糊經驗」是否站得住腳。

比如常有人說:「做內容要定時定量更新,培養蜘蛛的抓取習慣,隨意變動更新時間會影響抓取。」這話到底對不對?不妨用網站日誌來驗證:把一個月內每天各時段的蜘蛛抓取情況拆分統計(注意樣本選取的合理性),再對比自己的內容更新節奏,很快便能看出哪個時段蜘蛛来得勤、更新是否踩中了它的胃口,結論自然浮現。

二、提高爬取頻率,帶動收錄

蜘蛛的爬取頻率,往往由內容質量決定。唯有新鮮優質的內容,才能吸引蜘蛛反覆光顧——大型內容站每天海量更新,正是把蜘蛛「留」在了站內,抓取頻率自然水漲船高。頻率上去了,頁面內容與鏈接的更新就能被更快抓取,收錄也更充分。

很多人抱怨快照不更新或滯後好幾天,我以為,多半也是抓取頻率不夠所致。想讓快照更新快,尤其中央新站,前期一定要多做內容建設——頁面若無更新,蜘蛛往往不來,或來了也不回傳數據,等下次用戶搜索,調用的還是數據庫裡的舊存貨。

三、研究並優化蜘蛛的爬取習慣

至於爬取深度、飽和度、優先、冗余度與爬取路徑,都是對蜘蛛習慣與策略的研究。由於筆者尚未做過針對性實踐,只能談談理論上的想法。

爬取深度不足,往往是因為站點在結構布局時,沒考慮蜘蛛能否逐層充分抓取,這就牽涉鏈接入口的布局,也牽涉優先入口的選擇。為大站做診斷、提升流量與收錄時,常見的一招就是優化蜘蛛的優先入口,手段之一是用nofollow標籤屏蔽部分頁面。此外還要留意飽和度——對單頁抓取過多,其實是在浪費蜘蛛資源,若能合理調配,對抓取與收錄的提升大有裨益。

至於冗余度與爬取路徑,恐怕還需更深入的實踐。後續若有新發現,再與大家探討。

XML學習教程| jQuery入門知識| AJAX入門| Dreamweaver教程| Fireworks入門知識| SEO技巧| SEO優化集錦|
Copyright © DIV+CSS佈局教程網 All Rights Reserved