近期平台社區策劃了一場關於網站該不該用 CDN 的大討論,77.43% 的用戶認為應該用,但一部分用戶糾結於:用了 CDN 之後對搜索引擎會不會產生負面影響?學院結合百度 spider 工作原理及百度工程師建議,整理本文供廣大站長參考。
CDN 能讓用戶就近取得所需內容,解決 Internet 網路擁擠狀況,提高用戶訪問網站的響應速度。那它對搜索引擎有什麼影響呢?
先看社區用戶的看法:
【正方觀點】
1、提升網站加載速度:CDN 透過快取技術提升網站打開速度,便於蜘蛛快速抓取和爬行。
2、提升網站安全性:隱藏真實網站 IP,防禦針對伺服器 IP 的攻擊與各種探測掃描,避免被黑。
3、提升網站穩定性:CDN 的 IP 遍佈全國,若出現局部地區網路問題,不影響搜索引擎抓取。
4、提升用戶體驗:CDN 提升用戶的打開體驗,對提升排名也有一定作用。
【反方觀點】
1、抓取數據下降:CDN IP 的多樣性,部分 IP 可能對蜘蛛並不友好。
2、快取導致數據陳舊:CDN 的快取特性,導致部分地區內容更新不同步。
3、服務商良莠不齊:因服務商實力不同,可能導致 CDN 系統不穩定,反而產生負面影響。
4、本地網站無需 CDN:部分網站只服務本地,只要機房也在本地,無需使用 CDN。
綜合雙方觀點,爭議主要集中在 CDN 的多 IP 入口和快取機制會不會對搜索引擎抓取、網站排名產生不利影響。
從搜索抓取機制上講:Baiduspider 對站點的抓取方式和普通用戶訪問一樣,只要普通用戶能訪問到的內容,我們就能抓取到。不管是什麼技術,只要能保證用戶流暢訪問網站,對搜索引擎就沒有影響。而快取技術提升了打開速度和用戶體驗,這也是百度一直倡導的。那為什麼還是有些網站使用 CDN 後產生了負面影響?我們請教了百度工程師,主要有兩方面因素:
一是部分 CDN 服務商硬件投入不夠,經常出現不穩定情況,導致蜘蛛返回大量 503 內容,造成抓取量下降,有的甚至影響了索引量。所以選擇有實力的 CDN 服務商很重要!
二是快取機制在網站出現死鏈、無法打開、被黑等情況時起到了推波助瀾的作用,短時間內產生一些不利快照,影響了排名。但這種情況不用擔心,及時清理源文件和 CDN 快取,並在站長平台提交相關死鏈數據等方法進行挽回,是可以恢復到原來的情況的。
參考資料:以下內容由百度開放雲提供。
網站要不要用 CDN?
畫了一張樸素(很 low)的圖幫助大家了解業務是否適合使用 CDN:

以靜態請求來說,流量命中率越高的業務越適合用 CDN,這時成本越低、加速效果越好。
以動態請求來說,一般不適合用 CDN,經過 CDN 會增加鏈路的時間開銷;除非 CDN 有動態加速功能保證鏈路選擇最優,這種情況下選用動態加速,好處是源站只需單線部署,由 CDN 實現更複雜網路的接入。
註:流量命中率=(((CDN 出流量-發生回源的出流量)/CDN 出流量)×100)%
什麼是流量命中率?這是 CDN 非常重要的一個指標,命中率越高意味著加速效果越好、花的錢越少。

也許你會問:我的內容是靜態的也很 hot,是否就一定要用 CDN 呢?答案是不一定,還有一個至關重要的因素是成本。CDN 的成本降低是在最大化保證用戶體驗的前提下成本最優。簡言之,對於一些對成本非常敏感、不追求極致用戶體驗的公司,CDN 未必是好選擇。
舉個例子,一個小型創業遊戲公司使用 CDN 的主要場景是遊戲下載,由於處於創業階段對成本非常敏感,同時認為當前階段可以犧牲用戶體驗,最終並沒有選擇 CDN,而是直接購買了 1Gbps 的帶寬並限速,使成本從每月約 12 萬元降低到約 5 萬元。但 CTO 也坦言這是特殊階段不得不犧牲用戶體驗的選擇,後面仍會考慮使用 CDN。
結論:如果你要保證網站訪問體驗最優化,網站訪問很熱的靜態內容是非常適合使用 CDN 的。
1. 提升訪問速度:使用 CDN 後全國訪問速度平均傳輸 5.76MB/s。

使用 CDN 前全國訪問速度平均下載 590KB/s。

2. 降低帶寬成本:在保證訪問效果最優的情況下,使用 CDN 最大程度降低帶寬成本和人力維護成本。
3. 減輕源站壓力:使用 CDN 後,一個帶寬峰值 100Gbps 左右的大型站點基本只需維護帶寬峰值 1~2Gbps 左右的源站即可。
4. 隱藏源站、增強抗攻擊能力:由於 CDN 隱藏了源站真實 IP,加上 CDN 天然的防禦能力,源站安全性大幅提升。
【文/百度站長學院】