DIV CSS 佈局教程網

您现在的位置: DIV+CSS佈局教程網 >> 網頁腳本 >  >> JavaScript入門知識 >> AJAX入門 >> AJAX詳解
用 ASP 與 XMLHTTP 抓取網頁特定片段:以天氣預報為例
編輯:AJAX詳解     

需要在自己的網站上即時顯示天氣、股價或任何第三方資訊時,最直覺的做法就是去抓對方的網頁。ASP 時代最順手的工具莫過於 Microsoft.XMLHTTP 元件,搭配 ADODB.Stream 做編碼轉換,就能把遠端網頁的字節流變成可處理的字串。

思路:抓回來之後,只留我要的那一段

整份 HTML 裡我們通常只想要一小塊內容。範例的目標頁面中,天氣資料長這樣:

<p align="left">2004年8月24日星期二;白天:晴有時多雲南風3—4級;
夜間:晴南風3—4級;氣溫:最高29℃最低19℃ </p>

做法是以日期(例如「2004年8月24日」)當起點關鍵字,以 </p> 當終點關鍵字,把兩者之間的字串切出來,就得到一段乾淨的天氣文字,不必去背複雜的正則表達式。

三支核心函式

getHTTPPage:抓取並轉碼

Function getHTTPPage(Path)
    t = GetBody(Path)
    getHTTPPage = BytesToBstr(t, "GB2312")
End Function

XMLHTTP 取回的是原始位元組,中文站台多半是 GB2312 編碼,因此必須走一遭 BytesToBstr 轉成系統認得的字串。

GetBody:送出請求並取回 ResponseBody

Function GetBody(url)
    on error resume next
    Set Retrieval = CreateObject("Microsoft.XMLHTTP")
    With Retrieval
        .Open "Get", url, False, "", ""
        .Send
        GetBody = .ResponseBody
    End With
    Set Retrieval = Nothing
End Function

BytesToBstr:靠 ADODB.Stream 完成編碼轉換

Function BytesToBstr(body, Cset)
    dim objStream
    set objStream = Server.CreateObject("adodb.stream")
    objStream.Type = 1          ' 二進位
    objStream.Mode = 3
    objStream.Open
    objStream.Write body
    objStream.Position = 0
    objStream.Type = 2          ' 文字流
    objStream.Charset = Cset    ' 指定 GB2312
    BytesToBstr = objStream.ReadText
    objStream.Close
    set objStream = nothing
End Function

這段是經典手法:先用型別 1(binary)把位元組寫進串流,把指標移回開頭,切換成型別 2(text)並指定 Charset,再 ReadText 讀出來。跨編碼處理在 Classic ASP 裡幾乎都靠這招。

Newstring:找出關鍵字的位置

Function Newstring(wstr, strng)
    Newstring = Instr(lcase(wstr), lcase(strng))
    if Newstring <= 0 then Newstring = Len(wstr)
End Function

用 lcase 做大小寫不敏感的搜尋,找不到就退回整份長度,避免後續 Mid 出現負數而炸掉。

組裝起來

<%
Dim wstr, str, url, start, over, dtime
dtime = Year(Date) & "年" & Month(Date) & "月" & Day(Date) & "日"
url = "https://www.qianhuaweb.com/"

wstr = getHTTPPage(url)
start = Newstring(wstr, dtime)
over  = Newstring(wstr, "</p>")
body  = mid(wstr, start, over - start)

response.write "<MARQUEE onmouseover=this.stop(); onmouseout=this.start()>" & body & "</marquee>"
%>

最後把結果塞進一個跑馬燈,滑鼠移上去就停、移開就繼續。以今天的眼光看 <marquee> 早已退場,但這個「抓第三方頁面 → 抽片段 → 鑲進自己頁面」的骨架完全沒變。

實務上必須補上的幾件事

範例為了精簡做了不少省略,真正上 production 前請務必處理:

  • 安全性:頁首寫了 On Error Resume Next,這會把所有錯誤靜靜吞掉,出問題時很難 debug。請改用 On Error Goto 0 搭配明確的錯誤處理,並對抓回來的內容做 HTML 編碼,避免把對方的內容當成自己的程式執行(XSS)。
  • 逾時控制:Server.ScriptTimeOut = 9999999 等於關掉逾時保護。外部請求一定要設合理的 timeout,並在失敗時提供預設值。
  • 快取:天氣這類資料一小時變一次,每次都即時抓取對伺服器與對方網站都不友善。用 Application 或檔案快取個十幾分鐘即可。
  • 關鍵字選擇:用「今天日期」當起點很脆弱,頁面一換版就抓不到。優先用結構標記(如某個 class 或 id)當錨點。
  • 授權與合理使用:抓取他人內容前請確認 robots.txt 與使用條款,能拿到官方 API 就別爬 HTML。

結語

XMLHTTP 加 ADODB.Stream 這套組合,是 Classic ASP 時代做「網頁異步行」與「編碼轉換」的標準答案。技術本身如今已被更現代的 HTTP 用戶端取代,但它示範的問題本質——如何跨來源取資料、如何處理編碼、如何精準截取需要的片段——每一代 Web 開發都還是要面對。

XML學習教程| jQuery入門知識| AJAX入門| Dreamweaver教程| Fireworks入門知識| SEO技巧| SEO優化集錦|
Copyright © DIV+CSS佈局教程網 All Rights Reserved