易用度在企業(yè)級中后臺產(chǎn)品的探索和實踐

2021-5-31    資深UI設(shè)計者




引言

今年,我們在內(nèi)部中后臺產(chǎn)品進行嘗試,發(fā)現(xiàn)「易用度」可以作為合適的度量指標,并成功推廣到 35 個產(chǎn)品,幫助PD、設(shè)計師、工程師等產(chǎn)品設(shè)計者去衡量產(chǎn)品體驗現(xiàn)狀,發(fā)現(xiàn)改進機會點。實踐證明,易用度,相比滿意度、尖叫度、NPS,更適合技術(shù)類產(chǎn)品的體驗度量。結(jié)合用戶行為數(shù)據(jù),可以為用戶畫像、改進方向、運營策略提供更準確的決策依據(jù)。


一、中后臺體驗度量現(xiàn)狀

在公司內(nèi)部,技術(shù)類產(chǎn)品種類繁多,有很大一部分是開發(fā)、運維人員使用的中后臺產(chǎn)品,且以從 0-1 階段為主。由于這部分同學本身工作復(fù)雜度高,又必須依賴內(nèi)部產(chǎn)品來完成,所以長期以來“簡單易用”成為大家追求的產(chǎn)品體驗標準,他們也把“如絲般順滑”作為終極目標。但現(xiàn)實情況是,上手門檻高是使用技術(shù)類產(chǎn)品最大的痛點。


對于前臺業(yè)務(wù)的設(shè)計者,經(jīng)常會使用「人+錢」,也就是「流量+付費」來衡量產(chǎn)品效果。通過成功率、轉(zhuǎn)化率等指標,可以快速看到用戶行為上的反饋,來指引后續(xù)優(yōu)化。但對于技術(shù)類產(chǎn)品,尤其是強流程、工具型產(chǎn)品,很難找到一套契合業(yè)務(wù)特點的度量方式。理論上,使用「成本+效率」是比較合適的衡量維度,實際操作下來,找到設(shè)計和產(chǎn)品效果之間的因果關(guān)系,并非易事。


我們做了一個內(nèi)部調(diào)查,發(fā)現(xiàn)產(chǎn)品設(shè)計者經(jīng)常容易遇到這些問題:

  • 體驗度量是一個繞不開的話題。天貓、阿里云、華為、京東都有嘗試提出解決方案,但沒有統(tǒng)一的衡量維度。

  • 設(shè)計方案與產(chǎn)品的市場反饋,需要一個可以解釋關(guān)聯(lián)關(guān)系的抓手,這對迭代方向的指引至關(guān)重要。

  • 產(chǎn)品團隊逐漸重視用戶用戶,但缺乏有說服力的指標。


業(yè)界在體驗度量上的方案,大致分為 3 個派別:

  • 客觀衡量法:通過數(shù)據(jù)埋點監(jiān)測用戶行為數(shù)據(jù)。例如經(jīng)典的 PULSE 模型,還有大家熟悉的運營指標,活躍用戶數(shù)、留存率、ARPU、LTV等等。這對于還未商業(yè)化、用戶基數(shù)少的產(chǎn)品不適用。

  • 主觀衡量法:收集用戶主觀打分。經(jīng)典的滿意度、尖叫度、NPS,可用性測試量表(如SUS),美國客戶滿意度指數(shù)ACSI。

  • 主觀+客觀衡量法:把用戶行為數(shù)據(jù)和主觀打分結(jié)合起來,多數(shù)用歸一化方式得出一個總分,把分數(shù)劃分成不同檔次作參考。Google 經(jīng)典的 HEART 模型,內(nèi)部 的 PTECH 模型,阿里云 QoUE 模型 ,華為云的用戶體驗?zāi)P汀?


在掌握了這些信息之后,我們在內(nèi)部的技術(shù)類產(chǎn)品上,進行了一輪新的探索。經(jīng)過半年時間的試點,結(jié)合業(yè)界的解決方案、內(nèi)部產(chǎn)品的業(yè)務(wù)特性,我們最終選擇主觀衡量法,并使用「易用度」這個衡量指標。



二、易用度指標

易用度,英文 Customer Effort Score ,簡稱「易用度」,也有譯成「費力度」,指的是用戶使用某個產(chǎn)品/服務(wù)來解決問題的難易程度。目的是消除或減少用戶使用產(chǎn)品過程中的障礙。


該定義來自 2010年 《哈佛商業(yè)評論》發(fā)表的文章——《Stop Trying to Delight Your Customers》。2013年,Gartner 子公司 CEB 發(fā)布 易用度2.0版本 的測量方法,定義為“解決問題的難易程度”(make it easy to handle my issue)。


它的源頭可以追溯到美國用戶研究專家 Jeff Sauro(2009)提出的單項難易度問卷(Single Ease Question,SEQ),在可用性測試之后,用戶需要對一個問題進行打分,問法是“整體上,這個任務(wù)是非常困難-非常容易(7分制)”。


為什么說「易用度」更適合技術(shù)類的產(chǎn)品?主要基于技術(shù)類產(chǎn)品的三大特點。





衡量維度

總體指標

易用度:使用**產(chǎn)品完成**工作的容易程度。


影響因素

  • 主要因素:產(chǎn)品及設(shè)計給用戶操作帶來的復(fù)雜度,我們稱之為「基礎(chǔ)體驗」,包括幫助引導(dǎo)、功能入口、概念術(shù)語、任務(wù)流程、操作反饋。

  • 次要因素:用戶特征對使用易用度的調(diào)節(jié)作用,也稱之為「調(diào)節(jié)因素」。不同特點的用戶,會影響易用度分數(shù),包括操作熟練度、先驗知識、行為習慣。





量表開發(fā)

大家肯定要問,這些影響因素是怎么確定的,如何證明它們的合理性?這就要提到量表開發(fā)方法,基本上可以分為幾個步驟:


step1.理論借鑒

從相關(guān)領(lǐng)域查找經(jīng)典量表,站在巨人的肩膀上,經(jīng)過實踐檢驗的量表更可靠。我們首先從15種國際可用性測試量表中借鑒,抽出了一些關(guān)鍵的衡量維度。另外,易用度創(chuàng)始人Matt Dixon(2014)在《the effortless effort》書中,總結(jié)了在客戶服務(wù)場景,費力的關(guān)鍵因素:

    1. 信息分類不恰當,反復(fù)描述問題(82%)

    2. 需要多次求助(62%)

    3. 幫助指引不清晰(59%)

    4. 找不到相關(guān)入口,頻繁切換溝通渠道(59%)



step2.實踐總結(jié)

我們盤點發(fā)現(xiàn),技術(shù)類產(chǎn)品,絕大部分屬于工具型產(chǎn)品,強調(diào)任務(wù)流程,也是用戶痛點集中的地方。匯總多條業(yè)務(wù)線近1年的調(diào)研結(jié)果。除了功能、性能問題外,根據(jù)對完成任務(wù)的阻礙程度,無論是0-1階段,還是1-N階段,高頻體驗問題分布都集中在5個維度:

  • 幫助引導(dǎo)

  • 操作反饋

  • 任務(wù)流程

  • 概念術(shù)語

  • 功能入口



step3.數(shù)據(jù)分析

通過整理歸納的影響因素,需要經(jīng)過信效度驗證,才能有說服力。簡單來說,信度就是“可信與否”,指的是結(jié)果的一致性、穩(wěn)定性及可靠性;效度就是“命中與否”,指的是結(jié)果反映所想要考察內(nèi)容的程度。通過統(tǒng)計學的探索性因子分析,驗證性因子分析,我們確定 5 個維度可以有效測量易用度分數(shù)的變化。詳細可查閱如何找到影響用戶體驗的關(guān)鍵因素?



與滿意度、尖叫度、NPS的區(qū)別

從易用度-滿意度-尖叫度-NPS,是一個用戶預(yù)期的漸進變化。從中可以看出,易用度更關(guān)注的是基礎(chǔ)體驗,也就是“簡單好用”。





為什么易用度相比其他指標更適合技術(shù)類產(chǎn)品呢?主要有 3 個原因:

1.內(nèi)部試點發(fā)現(xiàn),滿意度無法準確衡量技術(shù)類產(chǎn)品體驗

  • 滿意度不能很好衡量真實體驗,分數(shù)虛高。我們在一些產(chǎn)品上,同時使用「易用度」和「滿意度」作為總體指標,發(fā)現(xiàn) 43% 的用戶滿意度評分,高于易用度評分,可以理解為“產(chǎn)品我滿意但不好用”。此外,易用度分數(shù)與滿意度分數(shù)相關(guān)性高達0.77,具備很高的可替代性。

  • 易用度更接近用戶真實體驗。對任務(wù)難易程度作出評價,用戶在判斷時會更直接,考慮使用過程中付出的腦力、時間等成本。對滿意度作出評價,除了考慮產(chǎn)品本身的易用性,內(nèi)部用戶還會考慮其他主觀因素,例如:

  1. 合作關(guān)系:你是研發(fā),我是用戶,擔心給你滿意度打低分了,之后就不滿足我的需求了。

  2. 中庸傾向:滿意度調(diào)查,已經(jīng)是人盡皆知的評分,國人都傾向于打中上。

  3. 評價范圍:易用度問的是完成工作的容易程度,范圍更小,用戶評價的時候更聚焦。滿意度問的是整體是否滿意,范圍更大,用戶會綜合考慮很多因素,例如上面提到的服務(wù)支持、上下游協(xié)作、需求響應(yīng)等等。


2.行業(yè)實踐表明,易用度比 NPS 更能預(yù)測用戶留存和成本變化

  • 易用度更能預(yù)測用戶留存?!豆鹕虡I(yè)評論》(2010年)發(fā)表易用度時,調(diào)研7500多名用戶,數(shù)據(jù)顯示易用度低的客戶,94%的有復(fù)購意愿,88%表示會增加支出,僅1%表示會對公司持負面態(tài)度。Garter(2013)發(fā)布報告,基于49000多名用戶數(shù)據(jù)發(fā)現(xiàn),易用度分值從1分提升到5分,可以使用戶忠誠度提高22%。Oracle(2015)發(fā)布服務(wù)云易用度白皮書發(fā)現(xiàn),當用戶表示使用產(chǎn)品付出了更少的努力,忠誠度提高18%。相反,從滿足用戶預(yù)期到超出用戶預(yù)期,用戶忠誠度的變化并不明顯。

  • 易用度更能預(yù)測成本變化。 Gartner(2019)對100+公司、12.5w用戶的調(diào)研發(fā)現(xiàn),易用度從高分到低分,可以降低37%的成本。


3.行業(yè)實踐表明,尖叫度更適合成熟度較高的產(chǎn)品類型

  • 目前在市場上,至少在國內(nèi),ToB 產(chǎn)品沒有達到飽和,定位也各有不同。在企業(yè)用戶心中,并沒有足夠清晰的心智和經(jīng)驗去判斷。例如企業(yè)微信和釘釘,基本上很少有用戶會同時使用這兩個產(chǎn)品,那用戶就無法準確評價二者的好壞。

  • 更關(guān)鍵的是,很多 ToB 產(chǎn)品,用戶多數(shù)是被動接受使用的,極少有選擇余地。普遍的高技術(shù)門檻,也把他們嘗試的意愿和可能性大打折扣。


優(yōu)劣對比

對比滿意度、尖叫度、NPS指標,易用度的優(yōu)勢在于:

  • 關(guān)注用戶完成任務(wù)過程中的阻礙,重視基礎(chǔ)體驗;

  • 適合去度量特定的用戶接觸點和任務(wù)流程,以便了解用戶解決問題的難易程度。

劣勢在于:

  • 對于分數(shù)過高或過低的情況,沒有通用的基線,需要區(qū)分行業(yè)、產(chǎn)品類型、產(chǎn)品復(fù)雜度來衡量分數(shù)是否合格;

  • 側(cè)重基本體驗,無法衡量用戶的總體滿意度。





三、易用度基線

經(jīng)過半年的實踐,我們采集了 35 個技術(shù)類產(chǎn)品的易用度,根據(jù)產(chǎn)品類型、產(chǎn)品階段來區(qū)分。結(jié)合內(nèi)部試點和行業(yè)調(diào)研,我們把技術(shù)類產(chǎn)品的易用基線,設(shè)定為 5.5 分。主要發(fā)現(xiàn):

  • 產(chǎn)品類型越復(fù)雜,易用度越低。試點產(chǎn)品中,ToC 產(chǎn)品易用度均值 5.46,ToB 產(chǎn)品易用度均值 5.32,ToD 產(chǎn)品易用度均值 5.07。

  • 產(chǎn)品階段越早期,易用度越低。試點產(chǎn)品中,0-1 階段的產(chǎn)品易用度均值 5.09,1-N 階段的產(chǎn)品易用度均值 5.28。


內(nèi)部實踐

如圖所示,易用度有很好的區(qū)分度,不同產(chǎn)品類型的不同產(chǎn)品階段分數(shù)呈現(xiàn)出差異性,我們可以根據(jù)這個數(shù)據(jù),去評估自己的產(chǎn)品所在位置。





為什么總體上選擇 5.5 分作為“易用”標準?


我們在這 35 個產(chǎn)品上進行易用度的嘗試,最終收集了 4000+ 問卷數(shù)據(jù),得出了技術(shù)類產(chǎn)品的體驗基線:

  • 總體均值 5.07 分,中位數(shù) 5 分。具體分布如圖所示,認為“比較容易”(5-7分)的用戶占 69%。

  • 但由于內(nèi)部的技術(shù)類產(chǎn)品,大多處于 0-1階段,以現(xiàn)在的狀態(tài)作為“易用”基線,顯然不合理。





業(yè)界標準

因此,我們需要結(jié)合業(yè)界的實踐作為參考。我們收集到 2 家用戶研究領(lǐng)域的老牌公司 Nicereply 和 HotJar 的數(shù)據(jù)。Nicereply 是一家咨詢公司,它服務(wù)的對象既包括 C 端用戶,也包括 B 端用戶。HotJar 是一家專做用戶行為監(jiān)控的公司,它服務(wù)的對象主要是 C 端用戶。因此,我們傾向于采納 Nicereply 發(fā)布的基線 5.5 分,作為參考。

  • Nicereply 公司在2018 年發(fā)布的易用度 benchmark,基線為 5.5 分。

  • HotJar 公司在 2019 年發(fā)布的易用度 benchmark,基線為 6.09 分。





分析思路

很多設(shè)計者會想,不就是一個問卷嘛,能發(fā)揮多大的作用?實際上,當問卷數(shù)據(jù)+用戶行為數(shù)據(jù),它將發(fā)揮更大的價值。

  • 現(xiàn)狀描述:對產(chǎn)品當前的功能、體驗、性能的在用戶心中的水位進行摸底,通過數(shù)據(jù)和主觀反饋找到原因。

  • 對比差異:技術(shù)型產(chǎn)品往往有多個角色共同使用,并且有上下游協(xié)作關(guān)系,可以通過問卷和數(shù)據(jù)發(fā)現(xiàn)不同角色的偏好,找出差異化的改進方向。

  • 影響關(guān)系:當發(fā)現(xiàn)某些模塊用戶評價低時,需要下鉆找到最相關(guān)的影響因素,這時需要用到相關(guān)分析,找到此消彼長或相輔相成的變化關(guān)系,以及用到回歸分析,找到可能的因果關(guān)系。

  • 聚類分析:結(jié)合問卷數(shù)據(jù)和用戶行為數(shù)據(jù),我們可以對典型用戶進行分層,也就是我們通常說的“用戶畫像”,可以結(jié)合經(jīng)典的 RFM 模型,找到高頻、忠誠、高付費且評價好的用戶。





現(xiàn)狀描述

以某個技術(shù)類產(chǎn)品 A 為例,通過現(xiàn)狀描述,可以發(fā)現(xiàn)低分人群抱怨的問題集中在哪里,提出問題優(yōu)先級排序。




對比差異

通過對比差異,把用戶根據(jù)人口學、行為特征進行單維分類,與易用度分數(shù)做交叉分析,找出人群之間的差異,有針對性改進。





影響關(guān)系

通過影響關(guān)系分析,可以找到影響產(chǎn)品 A 易用度分數(shù)的主要原因,也就是用戶為什么覺得好用/不好用。





聚類分析

通過聚類分析,結(jié)合問卷數(shù)據(jù)和用戶行為數(shù)據(jù),可以發(fā)現(xiàn)典型人群,制定差異化的運營策略。





現(xiàn)象與洞察

在 35 個技術(shù)類產(chǎn)品上的實踐,我們發(fā)現(xiàn)了一些常見現(xiàn)象和經(jīng)驗性的洞察,它并非都是普適的,卻有很高的參考價值。





結(jié)論

基于內(nèi)部技術(shù)類產(chǎn)品的體驗度量實踐,我們得出以下結(jié)論:

  • 實踐證明,易用度指標衡量技術(shù)類產(chǎn)品更有效。技術(shù)類產(chǎn)品降本增效的商業(yè)目的、降低技術(shù)門檻的用戶訴求、流程復(fù)雜上手難的痛點,決定了體驗度量要關(guān)注基礎(chǔ)體驗。滿意度、尖叫度、NPS去衡量都不太準確。

  • 易用度的衡量維度,包括 5 個部分的基礎(chǔ)體驗。即幫助引導(dǎo)、功能入口、概念術(shù)語、任務(wù)流程、操作反饋。

  • 結(jié)合內(nèi)部試點和行業(yè)調(diào)研,我們把技術(shù)類產(chǎn)品的易用基線,設(shè)定為 5.5 分。當前內(nèi)部技術(shù)類產(chǎn)品的易用度基線是 5.07分,行業(yè)技術(shù)類產(chǎn)品的易用度基線是 5.5 分,產(chǎn)品類型(ToC/ToB/ToD)、產(chǎn)品階段(0-1階段,1-N階段)也會有所差異。

  • 結(jié)合行為數(shù)據(jù),易用度可以進行描述、分類。使用現(xiàn)狀描述找出低分人群的高頻問題,使用對比差異找到多角色的不同訴求,分析影響關(guān)系找到影響易用度的主要因素,結(jié)合用戶行為數(shù)據(jù)進行聚類找到典型人群。


藍藍設(shè)計建立了UI設(shè)計分享群,每天會分享國內(nèi)外的一些優(yōu)秀設(shè)計,如果有興趣的話,可以進入一起成長學習,請掃碼藍小助,報下信息,藍小助會請您入群。歡迎您加入噢~~希望得到建議咨詢、商務(wù)合作,也請與我們聯(lián)系。

截屏2021-05-13 上午11.41.03.png



文章來源:站酷   作者:Ant_Design

分享此文一切功德,皆悉回向給文章原作者及眾讀者.
免責聲明:藍藍設(shè)計尊重原作者,文章的版權(quán)歸原作者。如涉及版權(quán)問題,請及時與我們?nèi)〉寐?lián)系,我們立即更正或刪除。

藍藍設(shè)計sillybuy.com )是一家專注而深入的界面設(shè)計公司,為期望卓越的國內(nèi)外企業(yè)提供卓越的UI界面設(shè)計、BS界面設(shè)計 、 cs界面設(shè)計 、 ipad界面設(shè)計 、 包裝設(shè)計 、 圖標定制 、 用戶體驗 、交互設(shè)計、 網(wǎng)站建設(shè) 、平面設(shè)計服務(wù)






日歷

鏈接

個人資料

藍藍設(shè)計的小編 http://sillybuy.com

存檔