
引子
某個細雨濛濛的午後,他獨坐在城市某角的咖啡館裡。一聲清脆的鈴聲,推門走進一位背著畫板的女生,清麗不可方物。他隱隱覺得似曾相識,卻想不起在哪見過,於是悄悄拿起手機拍了一張還算清晰的照片,導入某個 APP——一秒鐘後,這位女生的詳細資料顯示出來。他這才發現,原來是十年不見的老同學韓梅梅,於是走過去……
「好久不見……」
「你是?」
「李雷。」
燈光,音樂,景深,YY
……
傳統的圖片搜索,實現路徑是用描述性關鍵詞去匹配圖片的關聯文本。也就是說,現有的圖片搜索(比如 Google、百度的圖片搜索)在本質上仍然是文本搜索。而上面劇情裡李雷用的「利器」,卻是直接以「圖片源」去檢索信息(包括圖片與文本)。這樣的技術,應用前景會有多大?
先看幾個有意思的產品
1. Retrievr
Flickr 的老用戶對 Retrievr 應該不陌生,它是業內較早提供以圖搜圖服務的站點之一。

它提供兩種搜索方式:一是塗鴉搜索,用戶通過一個小巧的塗鴉編輯器畫出大致輪廓(有點接近模糊搜索);二是圖片上傳(支持本地文件與 URL)。原理是把搜索目標與 Flickr 服務器上的圖庫做比對,按匹配規則找出近似圖。遺憾的是 Retrievr 的識別率並不高,而且只針對 Flickr 上的照片做匹配過濾,實用性有限,目前更適合看成 Flickr 平台上的休閒拓展功能。
2. TinEye
相比 Retrievr,TinEye 靠譜得多。它由 Idée 公司(就是設計出 PixID 的那家母公司)開發,搜索方式類似:上傳本地圖片或提供在線圖片的 URL。TinEye 還為 IE、Chrome、Firefox 等瀏覽器提供了插件和收藏夾腳本按鈕,用戶可以在瀏覽器中用右鍵菜單直接搜索相似圖片。

官方數據顯示,截至 2010 年 7 月 19 日,TinEye 圖庫已達約 16.3 億張,用戶甚至可以拿一張源圖去檢索同類型的圖(比如雜誌封面)。

反向圖片搜索引擎
這種以圖片作為搜索源的技術,可以稱之為「反向圖片搜索引擎」。最具代表性的是 Google 的試驗性產品 Goggles,它能分析用戶上傳的圖片內容,辨認書籍、音樂專輯封面、繪畫、地標、場所和企業商標等。
Google 負責工程技術的副總裁維克·古德特拉曾表示:「我們最終的目標是可以對任何圖片進行識別。這項技術是我們在『計算機視覺』領域最初的研究成果(計算機視覺是指用攝像機和計算機代替人眼對目標進行識別、跟蹤和測量等)。你可以對著景物拍照,然後用拍到的照片進行網絡搜索。」

反向圖片搜索的使用場景相當複雜,這裡先列三個:
1. 「以圖找圖」,最常見的一種。比如網上看到一張喜歡的圖,可惜尺寸太小或質量不高,這時上傳小圖去搜高清大圖。
2. 用局部圖片搜索全圖。比如對考古感興趣的人,可以拿某件文物的「殘卷」去檢索完整作品。
3. 隨著移動電子商務發展,圖片搜索的需求變得越來越迫切。想像一下:逛街時看到一個很有意思的小東西,隨手拍下來上傳到淘寶,剎那間出現一份清單……
市場動態
面對這樣誘人的市場,巨頭們自然不會閒著。2009 年 Google 發佈 Goggles 的同時,Bing 也投入了自己的圖像搜索技術;之後 Google 又先後收購了 Plink 和 Like.com。
Plink:曾開發移動版圖像搜索引擎 PlinkArt,這是一款基於 Android 平台的應用,可以幫你搜到用手機拍下的藝術品的相關信息。
Like.com:前身是一家名為 Riya、從事面部識別技術開發的公司。
國內方面,阿里巴巴集團投資的圖片搜索站點「淘淘搜」已經上線,目前只覆蓋部分女裝類目;百度的新產品「識圖搜索」(當時仍處內測:shitu.baidu.com)也即將推出。

技術瓶頸在哪
曾和一位圖片搜索領域的專家聊過,得到的反饋是:以目前的技術,只能有限地搜索剛性物體(建築、書本等),而材質、顏色、相對坐標這些都不靠譜。另外,圖片搜索 ≠ 圖片檢索——只有當可用數據達到百萬級別以上,才稱得上「搜索」。所以移動互聯網領域的「圖片搜索」(比如手機拍照搜索)最大的瓶頸,在於缺少以「億」為量級的可用圖片數據。
換句話說,反向圖片搜索的技術局限在於:沒有一套針對整個互聯網雲端圖庫的統一匹配標準,這導致大多數圖片搜索產品只能服務於自己的數據源,是小眾生意,擴展性不強。
圖片搜索與移動電子商務
隨著移動互聯網起飛,基於移動平台的電子商務將在未來幾年出現新一輪爆發。其實,人們對新型移動購物體驗的探索從未停止。
比如基於音頻識別技術的 Shazam Encore:錄入正在播放的音樂,解析並搜索到音源文件,最後連接到音樂站點完成購買。——聽覺引導型購買體驗。

再比如 TinEye Music:用 iPhone 拍下 CD 封面,軟件就會拿這張照片去 iTunes、allmusic.com、YouTube 和 Wikipedia 裡搜索這張 CD 的全部信息。你可以試聽專輯、查看評價,也可以直接從搜索結果下單購買。——視覺引導型購物體驗。

所以,只要對應的購物平台有能力支撐起所有商品類目的圖片歸類,並形成一套相對完備的圖片匹配規則,這塊市場幾乎可以用「無限」來形容——它將是對傳統購物體驗的革命性顛覆。
幾點零碎的思索(感謝小柒同學分享心得)
1、在精確匹配尚未實現之前,反向圖片搜索引擎應該配合輔助篩選控件使用:上傳圖片的同時還能輸入其他篩選條件,以提高結果精準度。
2、除了複雜的篩選控件,也可以通過更完善的推薦系統與匹配規則來提升精準度。(關於推薦系統,後續文章再細談。)