網站地圖寫得規範與否,直接影響提交效率和抓取效果。以下十條是實踐中容易出問題的地方。
1)域名必須對應。在哪個平台認證了哪個域名,就只能提交該域名下的地圖。比如在站長工具中認證的是 www.haizhilongnet.cn,那麼提交的網站地圖也必須屬於這個站。
2)文件不要太大。一般建議單個地圖包含的 URL 不超過五萬條,文件體積不超過 10M。超出範圍時,拆分成多個小文件分批提交即可。
3)提交了不等於會被收錄。提交地圖只是告知,收錄仍取決於內容質量。當快照長期不更新或更新過慢時,可以把提交作為一種刺激手段,但不必頻繁重複提交。它的核心價值在於讓搜索引擎理解你的站點層級結構。
4)優先使用 XML 格式。建議採用 Sitemap.xml,而不是 txt 或 html 版本,因為後兩者不便於設置更新頻率和權重。
5)避免特殊符號。地圖中不要出現問號、等號等符號,以免造成權重分散和重複抓取。
6)重要 URL 靠前放置。給予更高權重。這一點我和同學討論過很久,其實應根據站點自身需求來定,不能一概而論,有時還要隨優化重點調整。
7)確保沒有死鏈。提交前務必全量檢查,地圖裡出現死鏈會直接影響提交質量評價。
8)更新頻率與內容更新節奏一致。新站不建議使用比 daily 更長的週期,以免出現異常。
9)權重分配要有層次。可以按站點層級逐級遞減,也可以對獨立頁、專題頁做特殊設置,但切忌全部設為 1——那是不現實的,等於沒有分配。
10)設了權限的內容不要提交。也不要重複提交相同內容,否則只會浪費抓取配額。