站長之家(Chinaz.com)2月6日消息 近日,國外SEO從業者Eli Schwartz分享了他使用Splunk的幾點心得。以下為Eli Schwartz(下文中的「我」)分享的經驗:
想必每個對SEO技術感興趣的站長,都希望從更深層次了解網站架構,以及谷歌的排名規則。從我這些年研究SEO技術的經驗來看,深入分析網站訪問日志,能讓我更清楚搜索引擎是如何「看待」網站的;而在眾多分析工具中,Splunk無疑是最讓我放心、也最實用的一款。
注:Splunk是機器數據的引擎,可用於收集、索引和利用所有應用程序、服務器和設備(物理、虛擬和雲中)生成的快速移動型計算機數據。
當網站生成一個新頁面,站長們最關心的自然是收錄問題。若以快照為指標,或許得等谷歌爬蟲抓取後幾天(甚至幾個星期)才能確認是否收錄。想快點兒確認,可以直接在搜索引擎裡搜相關頁面的標題。
而最行之有效的,是查看網站日志,便可確定網頁是否已被谷歌爬蟲抓取——這時就用得上Splunk了。
具體步驟:
1、首先選擇要查詢的時間段。時間段越短,響應越快,所以盡可能縮短查詢的時間差。
2、在查詢框中輸入以下查詢語句:
Index = {the name of your index} url stub AND googlebot
比如:如果你的索引名是「Primary」,URL是「free-trial.html」,則查詢語句為:
Index=primary free-trial.html AND googlebot
1、查看日志
404頁面是一種很招人煩的東西,98%的訪客一看到404頁面,往往會直接關掉。這樣一來,你的網站不僅錯失了一次展示內容或產品的機會,用戶還默默在心裡給了你個差評。你問:以後還來我們網站嗎?用戶答:呵呵。
對於404頁面,你可以用ScreamingFrog之類的工具來查找修復。但在失效頁面數量太多時,就該做日志解析了。透過日志解析,你能找出最多人訪問的404頁面,有選擇地修復或做跳轉。
設置Splunk查找404頁面:
1、首先選擇查找時間差,我通常設為30天,你們可按需設置。
2、在查詢框中輸入以下查詢語句:
Index = {the name of your index} status = 404 | top limit = 50 uri
限制數量可自行確定,我比較喜歡定為50條URL。查詢執行完成後,點擊Statistics選項,便可在列表中找出訪客最多的404頁面們。

2、查找404頁面
不同於301跳轉,302跳轉屬於暫時重定向。雖然在很多鏈接價值測試中,302都能通過測試並有排名,但由於前些年不少黑帽SEO借此技術騙排名,如今很多搜索引擎都加大了對它的打擊,因而302跳轉只能用於那些只需暫時跳轉的頁面。
透過Splunk查找302跳轉頁面的步驟:
1、同樣先選擇查找時間段,可按需設置,我喜歡設為30天。
2、輸入如下查詢語句:
Index = {the name of your index} status = 302 | top limit = 50 uri
跟查找404頁面一樣,可按需設置。

3、查找302跳轉頁面
如果你用過谷歌管理員工具,對谷歌抓取URL的展示頁面一定不陌生。但這些數據是否準確,得查看網站日志才能確定。
使用Splunk查詢每日抓取URL的步驟:
1、同樣選取時間,我還是喜歡設為30天(數據較多可以7天為單位)。
2、輸入查詢語句:
index ={name of your index} googlebot | timechart count by day
查詢執行完後,點擊Statistics選項,就能看到谷歌爬蟲每天抓取的頁面數據,也可點擊「visualization」選項查看變化詳情。
