目前百度spider抓取新鏈接的途徑有兩個:一是主動出擊自行發現抓取,二是從百度站長平台的鏈接提交工具中獲取數據。其中通過主動推送功能「收」上來的數據,最受百度spider歡迎。
所以對站長來說,如果你的鏈接很長時間遲遲不被收錄,建議試試主動推送功能。尤其是新站,主動推送首頁數據,有助於帶動內頁被抓取。

那問題來了:數據明明提交了,為什麼線上遲遲看不到展現?涉及的環節很多。單就spider抓取這一步而言,影響線上展現的因素主要有四個:
1. 網站封禁。你別笑,真有同學一邊封禁著百度蜘蛛,一邊向百度狂交數據,結果當然是收錄不了。
2. 質量篩選。百度spider進入3.0之後,對低質內容的識別能力上的一個新台階,尤其是時效性內容,從抓取環節就開始做質量評估篩選,過濾掉大量過度優化的頁面。從內部定期數據評估來看,低質網頁比之前下降了62%。
3. 抓取失敗。原因很多。有時候你在辦公室訪問完全正常,百度spider卻遇到麻煩。所以站點要隨時注意,在不同時間、不同地區都保持穩定可訪問。
4. 配額限制。雖然主動推送的抓取配額正在逐步放開,但如果站點頁面數量突然爆發式增長,還是會影響優質鏈接的抓取收錄。所以站點在保證訪問穩定的同時,也要關注網站安全,防止被黑注入寄生頁面。
(本文轉載自百度站長平台,原文地址:https://zhanzhang.baidu.com/college/articleinfo?id=896)