衡量網站品質的標準是收錄越多越好嗎?過去個人站長普遍把收錄量當成評估依據,收錄上去當然令人高興,但百度在這件事上經常大起大落,收錄不穩定的站,背後多半是垃圾內容太多。
所以我的看法是:收錄量無法判定網站的權重高低。適度減少低品質頁面的收錄,對網站的長期發展反而有幫助。以下四類該處理的對象。
如果你讀過官方的優化指南,就會知道要從不同角度檢查URL。同一份內容對應多個不同網址,對搜尋引擎來說是不友善的,因為它必須自行挑選一個標準版本。
處理方式有兩種:一是告訴蜘蛛不要抓,二是用跳轉把一系列變體網址統一導向你指定的頁面。
低品質頁既然對蜘蛛不友善,就得想辦法把它擋掉。屏蔽方式要依頁面性質來決定,因為不同類型的頁面,使用者與搜尋引擎的評估標準並不相同。把該屏蔽的屏蔽掉,對網站後續發展是重要的;而使用者互動所產生的內容,有時候會影響到權重與屏蔽標準的判斷,這一點在規劃時要一併考慮。
網站發展過程中一定會出現死連結,這無法完全避免。刪掉某篇文章、改掉某篇文章的網址,都會產生這種情況——原本已被抓取的文章變成了另一個連結,舊網址在索引裡就成了死連結。所以每次刪文或改網址,都要記得立刻處理掉舊的。
網站後台是自己進去的地方,不想被使用者看到,同樣也不該被抓取。一般透過robots.txt來屏蔽。
其實不論哪一種屏蔽,目的都是讓蜘蛛不要去抓那些低品質頁面。搜尋引擎對頁面品質的要求愈來愈高,如果網站要長期經營,這些基本功一定要做。與其追求收錄數字,不如追求收錄下來的那些頁面都拿得出手。