網站日常運作中,為了收集各產品的用戶反饋,通常會在頁面掛出意見反饋入口。這能幫助產品經理間接聽到用戶的聲音,即時了解痛點、拿到改進需求。如果在反饋問卷裡加入滿意度題目,就能把用戶的主觀感受部分量化;當反饋量大到一時消化不完時,量化的分數反而能更快推動改進。
在反饋問卷裡設滿意度題目,優勢明顯:能快速掌握部分用戶的感受,也能長期連續取得同一批用戶的評價。不足在於數據並不代表所有用戶,它受入口文案、位置、產品本身的用戶屬性影響很大。
雖然沉默的多數永遠存在,但滿意度研究告訴我們:願意發出聲音的用戶更容易轉化成忠誠用戶,正是這批擁躉在一定程度上推動了網站的發展。因此,反饋問卷仍然是目前相對友善、也相對有效的體驗回饋管道。
每個產品的反饋問卷都有滿意度分數,那能不能橫向比較?以淘寶為例:登入頁面的用戶是廣大的買家與賣家;維權頁面的用戶主要是遇到交易糾紛的買家;賣家工具的用戶是購買了該產品的賣家。這些頁面都有反饋入口,問卷裡也都帶滿意度題目。
顧慮顯而易見:各產品用戶群不同;填答時的情緒不同;填答意願與機會也不相同。直接比,當然不合適。
解法需要一個大前提:認定每個產品滿意度分數處於中間位置的用戶,能夠代表該產品的平均水平。有了這個共識,後續分析才能往下走,否則只能停在原地。各產品的滿意度數據標準化之後,前面那些顧慮都能被弱化。
反饋問卷有別於正式發送的邀請型調研問卷——用戶是為了提意見而來,所以此處不宜設置多道滿意度題目。
為了取得多角度的對比數據,各產品的分項指標應盡量統一。建議挑出網站目前最關鍵的3到4個共通指標,例如排版、功能、內容、視覺,再加上總體滿意度,就構成一套簡單的評價標準。
量表用五級、七級還是十級,可依研究目的決定,各產品各指標保持一致即可。就本案例而言,反饋問卷中的量表最好用五級,選擇起來更輕鬆。Berdie(1994)根據研究經驗指出,多數情況下五級量表最可靠、內部一致性較佳,選項超過五級,一般人難有足夠的辨別力。
1. 清洗滿意度數據(去重、剔除隨意亂答、修正邏輯錯誤等)。可依缺失情況適當插補——國外研究顯示,五級量表的缺失值插補為3,對結果的負面影響較小。
2. 把單個產品的每項指標做標準化,找出中位數。
3. 將中位數的標準分轉換為百分制,可用 T=70+30×Z(中位數)或 T=60+40×Z(中位數)。這種轉換近似功效係數法,各百分制分數之間可以互相對照。
4. 依分項與總體的權重計算最終得分。權重可用統計方法求得,也可依經驗事先規定。
只要計算過程完整可靠、規則保持不變,就能對多個產品的滿意度做橫向與縱向比較。
文中這種比較方式,只是在現有條件下的一種變通做法。若條件允許,最好每半年、每季甚至每月分產品隨機抽樣,投放完整的滿意度問卷,數據經合理的統計分析後再作橫向、縱向對照,說服力會強得多。