據站長圈內人士透露,百度將在近期開放 Sitemap,也就是網站管理員工具。具體開放日期尚未公布,有興趣的朋友可以持續關注。
簡單來說,Sitemap 方便管理員主動告知搜尋引擎:我的網站上有哪些頁面可供抓取。最樸素的 Sitemap 形式就是一個 XML 文件,裡面列出站內網址,並附上每個網址的相關詮釋資料——上次更新時間、變更頻率,以及相對於站內其他網址的重要程度等,讓搜尋引擎能更聰明地抓取網站。
網絡抓取工具通常靠站內與站外的鏈接來發現網頁。Sitemap 提供了另一份數據來源,支持 Sitemap 協議的抓取工具可以據此抓取清單中的全部網址,並讀懂附帶的詮釋資料。需要說明的是,使用 Sitemap 協議並不能保證網頁一定被收錄,但它確實能給抓取工具提供有效提示,讓抓取過程更有效率。
Sitemap 0.90 協議依據「創用 CC-姓名標示-相同方式分享」授權條款提供,已被廣泛採用,並獲得包括 Google、Yahoo!、Microsoft 在內的眾多廠商支持。