DIV CSS 佈局教程網

您现在的位置: DIV+CSS佈局教程網 >> 網頁SEO優化 >  >> SEO優化集錦
SEO必讀:搜索引擎的工作原理拆解
編輯:SEO優化集錦     

有人說搜索引擎工作原理對新手太抽象,而且規則變來變去,誰也不敢說自己真正搞懂了。但無論演算法怎麼調整,收錄的基本邏輯從未改變:

1、找到 URL 並下載頁面。

2、判斷頁面質量是否達到收錄門檻,達標則收錄,否則丟棄。

3、判斷已收錄頁面是否有更新,有則刷新快照。

百度也好、谷歌也罷,都不會繞過這三步。以它為地基,可以把整個流程講清楚。

搜索引擎的五大系統

圖1

抓取系統。分探測與下載兩部分。探測系統就是我們熟悉的蜘蛛,它在互聯網上爬行時發現一個 URL,就調動下載系統把頁面抓回服務器,再交給數據分析系統。

數據分析系統。包含分析與處理兩環。它先剝離不相關的標籤、去重複內容,把正文提取出來;隨後判斷質量是否達標,達標交給存儲系統,不達標直接丟棄。

存儲系統。保存已收錄頁面,並定時回訪,檢查是否有更新。

緩存系統。存放搜索引擎判定為高價值的內容。這解釋了一個常見疑惑:為什麼顯示收錄幾千萬條,實際只能翻到一千條左右——真正被放進緩存、能快速響應查詢的,只有那一小部分。

展示系統。把檢索結果渲染到用戶屏幕上。

一個頁面是怎麼被抓取的

圖2

蜘蛛在互聯網上爬到你的 URL,先把它提取出來,根據站點權重和相關性插入 URL 隊列。接著判斷這條 URL 能否正常解析。

這裡有個關鍵細節:蜘蛛並不是直接分析網頁內容,而是先找你的 robots.txt。它會按照文件裡的規則判斷這個頁面能不能抓。如果 robots 文件不存在,服務器會返回 404,但多數情況下搜索引擎仍會繼續抓取站點內容。

抓取成功後,搜索引擎會先做一次簡易判斷:達不到收錄門檻的,URL 重新回到隊列排隊;達標的,才真正下載頁面內容。

拿到內容之後,它會提取頁面裡的所有 URL 繼續入隊,同時對正文做進一步分析。二次判斷通過,頁面才會寫入硬盤。

為什麼搜索結果只有那麼幾條

用戶發起查詢時,為了壓縮響應時間,搜索引擎會把相關性較高的一部分內容放進臨時緩存區。從內存讀數據比讀硬盤快得多,所以最終呈現給你的,只是緩存裡的那一小部分。

而躺在硬盤裡的頁面並非一成不變。搜索引擎會依據站點權重定時回訪,判斷內容是否更新、是否達到進入緩存區的標準。如果在回訪中發現頁面已被刪除,或質量已跌破門檻,它同樣會被清理出索引。

理解這套機制,你就能明白很多日常操作背後的原因:為什麼 robots 配置錯誤會導致整站不被收錄,為什麼內容質量下滑會讓收錄量萎縮,為什麼快照更新頻率是站點健康度的重要信號。

文章原創自任敬林博客,轉載請注明出處:https://www.renjinglin.com/11.html

XML學習教程| jQuery入門知識| AJAX入門| Dreamweaver教程| Fireworks入門知識| SEO技巧| SEO優化集錦|
Copyright © DIV+CSS佈局教程網 All Rights Reserved