搜索引擎的蜘蛛越來越聰明,但基本工作流程並不複雜。理解這套流程,才知道該把力氣花在哪裡。大致可以拆成四步。
蜘蛛之所以被這樣命名,是因為它的移動軌跡像沿著絲線前進。落到站點上,這些「絲」就是連結。蜘蛛進站後會順著連結不斷深入,所以如何鋪好路徑,是最需要優先解決的問題。
實務上常見的做法是在頁面中增加站內調用:相關閱讀、推薦閱讀、排行榜等模組,本質上都是在為蜘蛛補充可走的岔路。
爬行順暢是好開局,內鏈設計到位、站內沒有死角,蜘蛛抵達每個頁面都輕鬆,抓取階段的效率自然高。
這一步要注意兩件事:一是精簡結構,把多餘的代碼清掉,它們會直接拖慢抓取效率;二是慎用 Flash,蜘蛛對它的處理能力有限,過量使用可能導致整頁被放棄。
內容的重要性在這裡體現得很直白。一篇原創佳作,蜘蛛爬過一遍往往就急著帶走;而抄襲拼湊的內容,可能需要反覆造訪十幾次仍不見收錄,甚至直接被忽略。同等條件下,原創與否帶來的差異非常明顯。
所謂放出,指的是頁面能在搜尋結果中被正常檢索到。之所以跳過索引直接談放出,是因為蜘蛛把頁面帶回索引庫之後,後續環節已不在站長可控範圍內,談得太細反而失焦。
耐心。放出時間可能是幾分鐘,也可能是幾天甚至更久,等待是必經過程。
恆心。很多站長上線初期熱情高漲,天天更新;一旦發現文章遲遲不收錄就洩了氣,轉而抄襲拼湊,反而把原本正常的節奏打亂了。
真心。認真對待每一篇文章、每一位讀者,寫出來的內容才會是別人真正想看的東西。