今天寫文章時照例去看了百度站長平台的新消息,看到一條當天剛發佈的公告,內容關於移動端。現在移動端的流量已經能和 PC 端分庭抗禮,百度對這一端的回應速度也明顯加快,今年相關公告特別頻繁。
平台工具中的移動適配與網站改版工具都涉及正則表達式,而兩款工具支持的正則並不完全相同,給管理員帶來了一些困擾。平台除了繼續提升工具的易用性之外,首先升級了移動適配工具中關於正則表達式的幫助文檔,增加了格式示例。
示例一,url 對應關係:
https://www.abc.com/26299483.html → https://m.abc.com/26299483.html
pattern:https://www.abc.com/([0-9]+).html → https://m.abc.com/${1}.html
示例二,url 對應關係:
https://www.abc.com/t26299483.html → https://m.abc.com/26299483.html
pattern:https://www.abc.com/t([0-9]+).html → https://m.abc.com/${1}.html
url 對應關係:
https://www.abc.com/fawliute/ → https://m.abc.com/fawliute/
pattern:https://www.abc.com/([a-zA-Z]+)/ → https://m.abc.com/${1}/

1、括號用來標記需要捕獲的部分,${1} 代表第一個括號中匹配到的內容;
2、提交前務必用工具自帶的驗證功能,確認每一條規則都能正確匹配到實際 URL;
3、規則衝突時,注意匹配順序,盡量寫得具體;
4、提交後持續觀察抓取診斷與日誌,確認蜘蛛確實抓到了移動版頁面。