robots檔案是搜尋生態裡極重要、卻又極容易被忽略的一環。很多站長在運營過程中隨手覆蓋或全站封禁,結果造成不必要的損失。那麼誤操作之後怎麼補救?
這次我們請到廈門258網站運營負責人鄭軍偉,分享一次真實事故的處理過程。
【案例背景】
網站開發2.0版本時,技術團隊選擇了線上開發。為避免搜尋引擎抓取開發版本,便設定了robots封禁。開發週期一個月,一個月後版本迭代,直接覆蓋了1.0版本——包括那份robots封禁檔案。兩天後流量大幅下滑,檢查收錄發現800萬條收錄歸零,大量關鍵詞掉出排名。

【處理方式】
1、把robots由封禁改為允許,然後到百度站長後台檢測並更新robots。
2、在站長後台做抓取檢測,此時顯示抓取失敗屬正常,多點幾次抓取,用來觸發蜘蛛來訪。
3、在抓取頻次工具中申請上調抓取頻次。
4、透過百度反饋中心說明情況,告知係誤操作所致。
5、在站長後台的鏈接提交處,設置資料主動推送(即時)。
6、更新sitemap並重新提交百度,之後每天手動提交一次。
以上做完,剩下的就是等。萬幸兩天後資料開始回升,第三天基本恢復正常水位。
【案例總結】
這次事故絕對是運營生涯的一次敗筆,總結三點給大家參考:
1、產品開發要避免線上開發,不能為了省事不搭開發環境。
2、產品迭代要有流程記錄:開發時做了哪些設定、哪些不能放出來、哪些必須放出來,都要非常清楚。
3、要經常關注百度站長後台,從資料變化中及時發現問題。
這個案例最值得記住的一點是:robots是全站層級的指令,一次誤寫的影響是幾百萬條收錄,而不是幾個頁面。把它納入上線檢查清單,成本幾乎為零,收益卻可能是整個站點的流量。
文章來自:百度站長平台。