DIV CSS 佈局教程網

您现在的位置: DIV+CSS佈局教程網 >> 網頁SEO優化 >  >> SEO優化集錦
從蜘蛛爬行規律出發:如何引導抓取
編輯:SEO優化集錦     

第一屆電商圈 SEO 大賽進入衝刺階段,選手各自拿出看家本領,這段時間確實冒出了不少新玩法。我有幸參賽,從中學到不少東西。下面想結合賽場上出現的「透過關鍵詞排名操作拉抬百度排名」的思路,從網站日誌的角度談談怎麼引導蜘蛛。

一、先看懂蜘蛛爬行後伺服器回傳的兩種狀態

回傳 200 0 64:透過實際追蹤,大致可以歸納三種可能。一是會話故障、請求不可達,這並不是百度封站的訊號;二是站點被處理、被「拔毛」或進入沙盒;三則可能是你的伺服器為 64 位系統。

回傳 200 0 0:代表蜘蛛已經對該伺服器發出請求並拿到回應,開始抓取新資料。在這個時間點發布新文章,通常很快就會被收錄,實測放出的機率能到八成左右。但如果是這個時間點之前發的文章,就不會立刻放出,一般得等百度大更新。

二、用工具分析爬行規律,再做誘導

伺服器日誌檔案通常很大,人工分析成本太高,可以借助日誌分析工具,例如光年的 SEO 日誌分析工具,操作不難,新手也能上手。

接著談談改良後的 SVM 應用思路:

A、從點擊行為判斷需求。使用者搜尋資訊時,伺服器會回傳大量結果。如果某個結果正是他要的,他會點進去停留一段時間認真閱讀,有時甚至會下載;如果不需要,他會立刻關掉。所以我們可以透過「是否點擊、停留多久」來反推需求。

B、建立檢索詞與頁面的對應關係。日誌裡記錄了使用者的訪問時間、URL 等資料。透過使用者識別與會話識別等處理,就能找出哪些檢索詞是真的有人要,進而確定檢索詞與滿足需求的 URL 之間的對應關係。觀察後可以發現:使用者點擊的結果,相關性高於排在它前面卻沒被點擊的結果。

C、放大高價值頁面的權重。日誌中記錄了使用者訪問網站的時間與頻率。只要統計分析這些資料,找出那些被頻繁訪問、且停留時間較長的頁面(也就是使用者真正感興趣的頁面),再透過 SVM 演算法提高這些頁面的權值,讓它們在搜尋結果中更靠前,就能有效提升檢索的精準度。

總結一下:這套思路的核心是透過日誌分析掌握蜘蛛的偏好與爬行規律,再用對應的方法主動誘導它抓取我們希望被看到的頁面。延伸來看,日誌分析還能幫我們製作「蜘蛛誘餌」,主動引導蜘蛛爬行與抓取——這可不只是做個網站地圖這麼簡單。

XML學習教程| jQuery入門知識| AJAX入門| Dreamweaver教程| Fireworks入門知識| SEO技巧| SEO優化集錦|
Copyright © DIV+CSS佈局教程網 All Rights Reserved