要做 SEO,先理解搜尋引擎如何運作。不同搜尋引擎細節或有差異,但大致流程相近:抓取、分析、索引與查詢。
一般可拆為爬蟲、數據分析系統、索引系統與查詢系統。爬蟲負責發現與抓取網頁,分析系統處理內容,索引系統建立資料庫,查詢系統則回應使用者搜尋。
爬蟲從已知連結出發,抓取網頁後放入暫存區,再從中擷取更多連結,持續循環。你可以把它想成一位不休息的訪客,沿著連結認識整個網路。
深度優先是沿著連結一路深入抓取;寬度優先則是先把同層連結完整掃過。實務上,搜尋引擎常會綜合兩種策略,並參考連結品質與網站結構。
若頁面經常更新,爬蟲可能提高拜訪頻率;若長期不變,拜訪間隔可能拉長。因此,穩定更新與高品質內容,有助於維持抓取關注。
抓取後,系統會進行結構化、去噪、去重、分詞與連結分析,再將重要資訊放入索引庫。正排索引通常以網址為核心,倒排索引則以詞項為核心,方便快速檢索。
理解這些流程,能幫助我們從搜尋引擎角度檢查網站:連結是否清楚、內容是否可被理解、頁面是否值得被索引。