網站日誌是站長分析蜘蛛抓取、索引與異常的重要依據。虛擬主機通常會在 FTP 中提供 logfiles 或類似日誌目錄,登入後可下載並查看。
一行典型日誌通常包含:IP、日期與時區、請求方法、請求路徑、協定、狀態碼、回應大小、來源頁與使用者代理。例如狀態碼 200 代表成功,404 代表資源不存在,301 代表永久轉址,500 代表伺服器錯誤。
透過日誌,可以判斷搜尋引擎是否經常拜訪、哪些頁面抓取失敗、是否有異常流量或惡意請求,是日常 SEO 與網站維護不可忽略的工作。