近期不少站長遇到同一個問題:站點首頁的快照不見了,內頁卻一切正常。下面按排查優先級給出四步思路。
IIS日誌記錄了爬蟲訪問時遇到的各種情況,通過返回頭能看到它抓取時具體卡在哪一步。如果主機或伺服器沒有開啟日誌,需要聯繫供應商開放出來;自管伺服器則自行開啟。這一步能省掉大量猜測。
首頁快照消失時,要判斷內頁收錄是「減少」還是「消失」,這兩種情況性質完全不同:
內頁與首頁同時消失。說明站點被整體處理了。這時該做的是回到官方站長指南,逐條核對搜尋引擎明確列出的規則,看看自己踩了哪一條。
僅首頁消失,內頁收錄基本穩定。通常是抓取首頁時遇到障礙,或資料庫臨時波動。這種情況不必慌,補一些誘餌鏈接引爬蟲回來即可。
首頁消失且內頁收錄腰斬。說明內容質量出了問題:可能是關鍵詞堆積,也可能是大量重複或採集內容。應立即停止採集、補充原創,並向搜尋引擎重新提交。
外鏈要分兩類看:友情鏈接的丟失比例,普通URL外鏈的消失比例。如果丟失比例超過20%,需要重新補充,且新增量最好做到原流失量的兩倍,才能把權重坑填回來。
檢查模板是否存在設計缺陷:代碼結構不完整、JS過多、frameset使用過度、flash元素過多、大量圖片沒有描述等。這些都會拖慢抓取效率。
四步的順序建議不要顛倒:日誌和收錄形態能快速定位問題性質,外鏈與模板則是修復環節。先定性,再動手,比一上來就狂發外鏈有效得多。