尝试用数据丈量用户体验


用户体验一直以来都是一种看不见摸不着的东西,任产品用户成千上万,你也没有办法准确地定义一个场景下怎么样设计是体验最好的。很多时候,我觉得自己离用户太远,号称为用户做体验设计,却更像是面对一个黑盒子:输入一些数据,看到一些数据变化。但用户究竟如何去使用产品,我们不得而知。

不幸的是,用户调研和可用性测试常沦为“说服”的工具,人们只从中选择自己想听的内容。如果数据正向,但收到好几个用户的反弹,如何处理?调研结果用户不买单,但是强推后数据非常好,又该如何理解?体量大了,再烂的产品也有人用,要是说不清下线的好处,是不是动不得它分毫?

下面我以自己的日常工作所得,聊一聊用数据丈量用户体验的一些心得。


1、明确商业目标和用户体验目标

一个项目拿到手,要首先明确的就是——商业目标是什么:是尽可能多地卖货,还是拉拢更多观众,或者宣传一个新的品牌活动?在考虑用户需求之前,就要把商业目标对应的数据确定好,一方面给自己一个方向,另一方面也让需求方负起责任。

要达成商业诉求,必须同时也命中用户的体验目标。所以在商业目标之后,要想清楚这个项目满足了什么样的用户诉求。体验目标不能太过笼统,如“买到最合适的商品”是一个大目标,但拆解后还可以得到“高效浏览商品信息”、“便捷地作出购买决策”、“享受到更多的优惠”等细分目标,这都会是后续设计的依据。

就算是做公益,所有的设计策略和方案都是建立在商业、体验目标之上。时刻记住它们,这会成为后期纠结、撕逼时的不二准绳。


2、确定客观数据指标

上面讲的是一些主观描述,但项目中,还是需要拿出每个目标所对应的客观数据指标。

“尽可能多地卖货” 对应 “销售额”、“成交转化率”;

“高效浏览商品信息” 对应 “页面停留时长”、“跳失率”、“完成任务前的操作次数”;

“享受到更多优惠” 对应 “优惠券模块点击率”、“优惠券使用率”。

退一万步讲,有些目标可能没有清晰的数值,也可以通过用户调研、业务方好评率等方式主动创造数据。如“用户希望浏览高品质感的品牌介绍” 可以对应 “品牌方满意程度”、“用户调研好评率”等。

撕逼最常见的原因就是不在一个频道争论,你说这个设计“体验好”、页面“设计精美”,但这话谁都能说,谁也都可以反驳,争论起来永远没有尽头。


3、测试时控制变量

上过初中就应该知道“控制变量”是对照实验非常基础的一个前提,即两个实验组除了被测试项以外,其他条件必须保证完全一致,才能说明测试项的对照结果。实际 AB 测试时,我们没有办法保证两组用户“100%相同”,但也要尽可能保证“控制变量”——可惜这常常被忽视。

举个例子,做测试时常用新旧版本做对比试验,以此来衡量新设计方案的效果。但如果仅拿“新版客户端用户”和“旧版客户端用户”在同一个功能下的行为数据做对比,可能就没什么价值。

为什么?因为主动更新 App 的用户,本身就比那些后更新、不更新的用户更加活跃,所有数据正向也是理所应当的。

那应该怎么做?应该在线上做两个版本同时存在,把更新客户端的用户分成2个对照组,分别看到新旧页面(即部分用户更新后看到的还是老版本),然后再看数据结果。


4、获取数据

一般能获得哪些类型的数据?

商业指标:成交额、注册用户数量、(明确定义后的)活跃用户数量等等,可以在服务端做数据记录,并周期性产出供参考使用;

体验指标:模块点击率、页面内模块点击顺序、操作性功能触发率(左右滑动、长按等),一般是在客户端埋点记录。

值得注意的是,凡涉及“率”的数据,分母和分子必须定义清楚,我见过很多数据由于定义不明,导致出来的“率”完全没有可用性。

举个例子,某个电商购买页面,优惠券是根据人群智能发放的,那优惠模块就不是所有用户都能看到。在计算点击率、使用率时,分母必须是能看到的这些用户,而不能粗暴地使用大盘数据。

具体的服务端、客户端埋点方法,一般对应的开发同学都懂。设计师需要按照前面分析的商业、体验目标,把需要的数据列出来,然后和开发同学沟通埋点方案。

至于数据呈现,简单的方法是开发同学定期(如每天)拉数据报表,然后邮件给大家,当然会脚本的设计师也可以自己去取;体验最好的,是做一个数据报表平台,可以定期或实时地查看数据,要能做一些可视化展示以及分析就更好了:

(图片来自阿里云官网)


5、数据要联合起来看

没有对比,看单个数据就没有价值。这我要分几种情况来解释。

a. 单个时间点的数据没有价值。要衡量设计方案的好坏,必须要有“前”、“后”两个数据甚至一段时间内的很多组数据才能有效。这意味着数据采集是一个连续的过程,并且要保证指标定义一致。看起来好像非常基础,但实际工作中很多人做不到;

b. 单个场景的数据不是最有价值的。你把某功能的点击率从1%提高到了2%牛不牛逼?牛逼。但可能竞品能做到5%,你的设计还是很烂。虽然别人家的数据往往很难获得,可一旦有机会,千万不要放过;(也可以拿自家产品的类似场景数据去做对比,比如阿里就可以拿天猫淘宝的数据做参考。)

c. 数据要结合整个流程。到本页面的流量占前一级页面总量的多少?本页面的流量来源是哪些页面,后续又去了哪里?我们称之为“流量漏斗”,可以对比出哪个环节是真正的短板。另外,如果单看“点击率”显然也没有价值,因为“点击率”既不是商业指标也不是体验指标,点击率高是否点击后的场景转化率高?点击率低是否是因为模块没有被露出?都是要考虑的因素。

举个例子。做了一个改版后,用户在页面的“平均停留时长”从60s变为45s,请问是好还是不好?

答案是不知道。说好,可以说用户在页面的效率高,更快完成任务,完成决策;说不要,可以说用户没有在页面里逛起来,信息不够吸引人。

但就像我表述的,没有商业、体验目标做准绳,一切数据指标都将丧失价值。


6、一些踩过的坑

研究模块“曝光率”时,以前的做法是模块只要被服务端展示,就当被看到——这问题在于,像 List 这种长页面,一次加载20个模块,排在后面的其实并没有进入屏幕,但也被计算为曝光,是不合理的。所以有时候,我们会用“翻屏率”说明用户的访问深度,而不是依赖靠后模块的曝光。

客户端也能做到模块出现在“屏幕可视范围内”时才统计为被曝光。但问题在于,如果用户很快地滑动到底部,中间的内容是算曝光了,还是没曝光?所以我们应该规定内容在屏幕可视范围内的停留时间,比如超过1s,才开始计算曝光。

项目上线前,最好像创业一样,制定“退出策略”。所有规则提前订好,不要等上线了再想去改,去下线,那成本远远超出你的想象。毕竟有的人,觉得东西做上去,就完成任务了。

最后,如果可以,请把目标写纸上贴电脑边缘,或者像我同事一样买个桌上的小黑板。时时刻刻提醒自己到底在做什么,为了什么。因为据我自己体验,常常做着做着就跑偏了......

不知道大家在使用数据时有什么心得?也欢迎留言告诉我,一起交流进步。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,736评论 4 362
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,167评论 1 291
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,442评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,902评论 0 204
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,302评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,573评论 1 216
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,847评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,562评论 0 197
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,260评论 1 241
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,531评论 2 245
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,021评论 1 258
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,367评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,016评论 3 235
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,068评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,827评论 0 194
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,610评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,514评论 2 269

推荐阅读更多精彩内容