什麼是網站日誌?
它是保存於網站空間內的一種文本文件,用來記錄網站運行狀態的各種數據,通常在網站運行過程中由服務器程序實時更新。
常見的網站日誌程序片段:

網站日誌分類:
網站日誌與服務器程序密不可分,不同服務器程序生成日誌的方式差異較大。互聯網上常見的服務器程序有:
Apache 49%,
IIS 20%,
Lighttpd 4%。

本文檔側重於IIS與Apache服務器的日志說明。
日誌分析與流量軟件分析的差別:
從SEO的角度來看,兩者的相同點是:都能分析出網站的各種流量、受訪頁情況、關鍵詞數據等。不同點則在於:
日誌分析往往無法呈現「當前」的實時流量;
常見的流量分析軟件無法分析搜索引擎爬蟲數據;
常見的流量分析軟件也不會分析錯誤鏈接等數據。
網站日誌研究對SEO的作用:
1、了解搜索引擎抓取網頁的情況。分析爬蟲訪問記錄,我們可以推斷出許多收錄線索:搜索引擎最近訪問頻率是否正常?它偏好抓取哪部分網頁?又很少光顧哪些區域?是否訪問了我們明令禁止的內容?
2、了解網站內容及鏈接是否正常。通過服務器返回的狀態碼,可以分析:是否存在死鏈接?是否有頁面元素(圖片、CSS腳本等)被誤刪?服務器是否曾暫時故障?是否有臨時重定向?是否有權限控制導致搜索引擎無法抓取?
網站日誌研究對網站安全的作用:
1、了解網站被盜鏈的情況。若第三方網站大量調用我們的圖片、視頻或網頁文件,會浪費服務器資源,通過日誌能很快發現這類問題。
2、初步分析網站是否被黑客植入程序。若黑客利用程序BUG植入代碼發起攻擊,日誌分析往往能找到蛛絲馬跡。
3、初步分析是否有程序在大量抓取數據。若有人用采集程序反覆抓取我方內容,既拖垮服務器性能,又讓資料外流,通過日誌數據就能發現這種采集行為。
總結:
一般來說,網站流量主要靠流量統計軟件來統計,而故障分析、搜索引擎爬蟲規律研究則依賴日誌軟件。如果我們能持續分析網站日誌,就能在網站出問題的短時間內迅速定位癥結,並盡快找到解決方案。