對SEO優化人員來說,IIS網站日誌就是我們的「指南針」與「晴雨表」。透過分析日誌,能有效修正優化方向、加快SEO進程。那麼,IIS網站日誌到底該如何分析呢?
以下面這段真實日誌為例:
2012-08-10 05:41:24 W3SVC1265125946 118.194.167.166 GET /irs_xadmin/FCKeditor/editor/skins/default/toolbar/image.gif - 80 61.135.204.168 Mozilla/4.0+(compatible;+MSIE+8.0;+Windows+NT+5.1;+Trident/4.0;+.NET+CLR+2.0.50727) 200 0 0
各字段依次為:
2012-08-10 05:41:24:用戶訪問的日期與時間。
W3SVC1265125946:該網站在服務器上對應的目錄標識。
118.194.167.166:網站服務器的IP。
GET /irs_xadmin/.../image.gif:用戶訪問的文件地址。
80:網站服務器的端口。
61.135.204.168:訪問用戶的IP地址。
Mozilla/4.0...:訪問用戶的詳細信息(瀏覽器、系統等)。
200 0 0:用戶訪問返回的狀態碼。
了解字段含義後,可借助日誌分析工具(如光年SEO日誌分析系統、Web_Log_Explorer等免費工具)對日誌進行拆解,大致可分析出以下幾方面:
1. 概要分析:各搜索引擎的訪問次數、總停留時間、總抓取量與占比。
2. 目錄抓取:各搜索引擎抓取網站目錄的情況,包括各目錄的爬取量。
3. 頁面抓取:搜索引擎對哪些頁面抓取得最多、最頻繁。
4. 關鍵詞分析:百度、Google等透過哪些關鍵詞抓取網站並帶來流量。
5. 狀態碼分析:分為用戶狀態碼與蜘蛛狀態碼,重點關注404——是否有已刪除的頁面仍存在鏈接,蜘蛛是否過多抓取這些鏈接。
1. 編寫新的robots.txt,禁止爬取一些系統目錄。
2. 進一步對URL靜態化,最好把tag頁和分頁也做成靜態地址。
3. 對未被收錄的文章,以該文章的URL向相關網頁做鏈接。
4. 優化文章標題與內容,提高關鍵詞曝光率。