網站日誌是記錄web服務器請求與運行狀況的檔案。透過日誌,站長可以了解網站是否被正常訪問、搜尋引擎蜘蛛抓取了哪些頁面、哪些請求成功、哪些請求失敗,以及是否存在異常流量。

分析日誌時,可以觀察不同搜尋引擎蜘蛛的抓取行為,例如百度、Google、Bing、搜狗等。透過蜘蛛名稱與返回狀態碼,可以判斷哪些頁面被抓取、哪些頁面未被抓取,以及是否存在錯誤連結。
200:抓取正常。
304:內容自上次抓取後未更新。
404:頁面不存在或連結錯誤。
301:永久重定向。
302:暫時重定向。
500:伺服器程式錯誤。
日誌能記錄異常請求與可疑訪問,因此對網站安全分析也有幫助。即使部分攻擊者會嘗試修改日誌,通常仍會留下蛛絲馬跡。站長若定期檢查日誌,較容易及早發現異常流量、錯誤連結或潛在安全風險。