幾乎每個做SEO的人都遇到過同一種尷尬:站上線之後,百度只收了首頁,內頁遲遲沒有動靜。可別人的站一上線就順利收了首頁和部分內頁。差別到底在哪?下面按自己的經歷逐條分析。
稍有基礎的人都知道,樹狀結構更利於蜘蛛爬行抓取。但這只是條件之一。還要看鏈接有沒有斷點——一處錯誤鏈接就可能讓蜘蛛停在半路。
我認為最合適的其實是F型結構:既順著搜尋引擎的抓取習慣,也符合用戶的瀏覽習慣。
什麼樣的站容易被放進沙盒?上線被收錄之後頻繁改動、讓蜘蛛摸不清頭腦的站,會進入審核期。此外,更新頻率忽高忽低、毫無節奏的站,同樣會被歸入這一類。
避免的辦法有兩個:一是把要改的地方在上線前全部改好,別上線之後反覆折騰;二是更新要有節奏,三天打魚兩天曬網絕對不行。另外,發外鏈時記得帶幾條內容頁的鏈接,主動引導蜘蛛往內頁爬。
很多HTML標籤對優化有幫助,DIV+CSS也有利於代碼精簡。但有些標籤恰恰相反,會讓蜘蛛抓取困難。

百度官方建議裡就有明確一條:frame/frameset/iframe標籤會導致抓取困難,盡量不要使用。
這三個標籤並非不可替代,通常都能找到替代方案。問題在於,很多站長並不寫代碼,只是下載一套模板按需求改改就用,裡面到底有什麼標籤並不清楚。
模板改得好,收錄沒問題;改得差,即使沒有這些標籤,也可能因為相似度過高而難以被收——大家都在用同一套模板,被判為抄襲的風險自然上升。
用模板上線之前,務必檢查三件事:有沒有百度不建議使用的標籤;框架結構是否合理;站內有沒有死鏈接。順帶也從用戶瀏覽習慣的角度自查一遍。
除了這些,還有大量細節會影響內頁收錄,這裡就不逐條展開了。