想讓爬蟲穩定抓取、順利收錄,站內必須先過幾道基本檢核。以下四個面向可以當成定期自查清單。
1. 正文內容中的連結不要超過三個,技術類、問答類頁面可視情況放寬。
2. 列表頁的內鏈要設定得當,讓爬蟲能從列表順勢走向內容頁。
3. 首頁的連結分配與數量要合理。實務做法是先完成關鍵詞挖掘,把詞分級建成名單,再依分級把資源分布到對應頁面。
所有產品分類都該同時放在站上嗎?顯然不是。首頁只承接一到兩個核心關鍵詞,產品分類要做的是「專而精」,而不是「大而全」。分類越龐雜,主題越模糊。
1. 導航中的目錄之間應是包含與被包含的關係,層級清楚。
2. 類別、用途、價格區間這些切分維度必須滿足「傻瓜化」——使用者看一眼就知道往哪走。導航裡塞關鍵詞重要,還是讓人一眼看懂重要?我的答案是後者。
3. 不同目錄之間是否有交叉連結,決定主題能不能互相滋養。
4. 主關鍵詞不要去搶目錄關鍵詞的權重,兩者角色不同。
1. nofollow:用來關掉不重要的權重出口。
2. robots.txt:控制抓取範圍,避免資源被無效消耗。
3. canonical 標籤:集中重複頁面的權重,論壇這類 UGC 站特別需要。
4. 301 跳轉:處理網址搬移與版本統一。
5. 網站地圖:讓爬蟲有一份完整的路徑清單可循。
這幾項都不算難,但每一項沒做好,都會讓後面的內容與外鏈努力打折。先把地基撿平,再談進攻。