網站收錄不如預期時,第一步不是急著增加外鏈,而是查看 IIS 日誌。日誌能呈現蜘蛛來訪頻率、抓取路徑與伺服器回應,是最直接的診斷依據。
200 代表抓取成功,404 代表頁面不存在,304 表示內容未更新,500 則可能代表伺服器異常。若大量出現 5 開頭狀態碼,應優先檢查主機穩定度。
若蜘蛛來訪次數突然下降,可能代表網站品質、伺服器或外部連結出現問題。結合快照、收錄與外鏈數據,能更快找出原因。
建議定期備份並閱讀日誌,搭配日誌分析工具可減少人工負擔。若發現死連結,可用 robots 或修正內部連結,避免蜘蛛持續浪費抓取預算。