搜尋引擎與網站之間,需要透過共同遵守的網絡協議來完成資料交換。常見的包括 HTTP、HTTPS、UA 屬性與 robots 協議。
HTTP 是瀏覽器與伺服器溝通的基礎;HTTPS 則是加密版本。UA 用來標示訪問者身份,robots 則用來規範哪些內容可被抓取。
理解這些協議,能幫助站長更準確地設定網站,也能減少抓取與收錄上的誤解。