赞助商
立即赞助

如何量化用户体验?试试阿里这个新出的「两章一分法」!

产品设计3年前 (2021)发布 流光
2.2K 0 0

互联半场,有的拼都在产体验;然而“体验”是一个非抽象的词,我们怎么把一个抽象的概念拆解成可落地执行的策略,作到企中后台产上,怎么衡量策略的有效性,这一直是我们团队面的重大课题。

1.

界于体验度量的验

目前于“体验量”较成熟的论模当属 Google 的 HEART 模:

另外还有 ISO 9126 软件质量模型和Davis 的 TAM 技术接受模型。人在此基础上进行很践,譬 SAP 的用户验问卷(UEQ)、Oracle 的客户验价值式(CX)等。

术队研发效能的 DEVA 模型,国际 UED 语音计的 HII 模型,阿云的 QoUE 模型。纵观这些模型和实践,大多是主观数据和观数据的结。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

队也曾提出过 TECH 、PTECH 模型,但由于模型的操作门槛较高、对埋点数据有不少要求,难以推广各条业线。痛定思痛后,决定重新回归业,回归“体验度量”的初心,去繁从简,提高通用性。

2.

企业中后产品的点

企业级后台品最大特是任务性质常明确;用户使用这类品常是为了解决某个确定问题,期待用新解决降本增效。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

桌研究也表明:可用性问题是软件业普遍问题:在英国,般商用计算用户有30%-40%有效生率;软件缺陷,48%是可用性问题。

基于述原因,我们试提出了“两章一分”的标准,分别从设验收、可用性测试、易用度分数三维度对产品体验行体检把关。

3.

什么「两章一分」

如何量化用户体验?试试阿里这个新出的「两章一分法」!

1. 设计验收章

“设计验收章”主要有 3 个维度:品原度、任务流程跑率、单页加载时。

产品还原度:指技同学的终产出与设稿之间的差异;

汇总人工智线、技术险线等 5 个产 1 年的可性测试结果。除功、性问题外,频体验问题要集中在“帮助引导”、“操作反馈”、“任务流程”、“概念术语”、“功入口”这 5 个方面。同时,结合之前项目沉淀的设计经验和设计工具,我们最终将“产还原”的子维定为“信息导航”、“帮助引导”、“操作反馈”、“案名词”;每个子维 2-3 句描述来进行评分。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

任务流程跑通率:验收确认跑通的干任务流程数,在有干任务流程数中的占;举个例子,设计稿中枚举了 10 条干任务流程,验收发现中 9 条已跑通,那么任务流程跑通率就是 9/10*100%=90%。

单页面加载时间:接雨燕能指标数据的产品看“首次有效渲染时长 fmp”个指标;未接的产品直接主观判断,超 3 秒的视为不合。

2. 用测试章

“用测试章”也在验收阶段执行,同样有三个参评度:最终完成率、人均求助次数和高阻碍页面。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

我们没有考虑将用测试的常用指标——操时长为参评度,主要原因是企业中台产品类型、使用场复程度各自不同:用语雀创建企业空间只需要 5 分钟;用云凤蝶搭建一个台页面能需要 60 分钟,用 sofa stack 创建并一个应用能需要 2-3 个小时……难以确定以为标准的具操时长。

3. 易用度分数

“易用度分数”标准为 5.5 分。

4.

「两章一分」的践

1. 案例实践现状

截至 2020 年 9 月,已有 58 个 产品践“两章一分”系列方法,基覆盖平台设计团支撑的重点项目及 UV 超 100 的产品。详细数据下图:

如何量化用户体验?试试阿里这个新出的「两章一分法」!

完整验“两章一分”的 18 个产品,仅用测试就帮助现 364 个问题,平均每个产品现 20 个问题;其中,“九州2.0 部署”现问题数达 53 个。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

2. 实操经验提炼

设验收:共创式验收

企业中后台产品产阶段中,由于一般专门的测试同学,因此设验收都由设师或 PD 单独执行,作必选环节,时候甚至会因发周紧张直接略过;既方法论,又缺乏仪式感。

“两章一分”的实践中,我们首次践行“共创式验收”,项目组会议的方式,邀请各个角色共同参与到验收环节中:如果产没有么技术门槛,那么各个角色分别独立操作核心流程;如果产有一定的技术门槛,则由技术同操作核心流程,同时共享屏幕,他同从旁观察。操作毕后,项目组共同讨论发现的体验问题,并将问题落地到 Aone 中进行期管落地。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

可用性测试:引入“技支持”+圈低测试人数+ 线测试降本

  • 引入“术支持”

企业中台产品通常有一定的技术门槛,以 SOFAstack的测试任务为例:

使用 sofaboot 术栈,创建 “hello world” 应用,通过“经典版”发布部署模式发布成功。

测试过程经常会出现些涉及到底层技术系统问题,设计学能解决,此我们议做企业后台品可用性测试时,需要配备至少名技术支持学,以备不时需。

  • 圈定最低测人数

如何量化用户体验?试试阿里这个新出的「两章一分法」!

Jakob Nielsen 在 2000年测试 5 人就发现 85%的可性问题;结合我们的实际务场景:有些产真实客户非难;前期“共创式验收”已跑通核心干流程;因此我们将最低测试人数限制为 3 人。

  • 线测试降本

我们开始实操案例时,恰逢疫情期,于是引入了线上远程测试;后续实践下来,发现远程测试能在观察、分析阶段显著降低执成本。

通过钉钉或阿里郎发起视频会议,邀请参加测试观察的同学入会,请测试用户共享操作屏幕,主持人录屏捕捉用户操作轨迹,PD、技项目组员从旁观察。测试结束后,使用语音转文本具,速将音频转文字。这种模式的好处两点:

  • 突破了距离和观察数限制;从实践来看,现场测试结合远程测试模,至少能时 2-3 进测试,执成本减半;
  • 语音转文本后,显著提升了分析效率。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

执行阶段的样化

最开始提出“两章一分”的时,我们原希望套标准能被为判断产品验是否用,能否上的标准之一;但际并未推动成功。里面有很原因,其中一个非常际的问题是很产品需要用上数据库才能跑通核心流程,在测试阶段没法跑通;就导致在测试阶段做用测试无法还原用户场。

此外,计或 PD 新某款产品,也希望能通过可用性测的方式来快速了解产品问题。回归“章一”的初心——帮助产品发现体验问题,因此,拓展了方法的执行阶段,不再局限于测或验证阶段,只要景适,都可以用。

3. 典型案例:LinkE 研发运维中心一期

产品简介

LinkE 研运中心是云通未来 Serverless 战场的重要产品;业务方希望用该产品来整合研同学常高频使用的研、运、中间件平台,大幅减少平台割裂和跳转,提供沉浸式的产品验。

目前该产品还于 0-1 建的阶段。

实践过程

  • 为了确保产体验良好,设计师在验收阶引入“两章一分”,进行共创验收和可性测试;
  • 共创验收阶段,邀请 PD、技术 等 8 名同学一参与,最终结果为“通”;
  • 可用性测阶段,计根研发通用景,招募 6 名研发同学参个可用性测任,别为:任 1,基于代码变更完成研发测调;任 2,基于发布完成支的集成、预发、灰度、生产

结果用户在任务 2 遇到高阻碍页面,导致用测试结果为“不通”,任务 2 的易用度分为仅 4.4 分,显著低 5.5 分的参考标准;最终现 30+ 问题点,并推动 PD 思考产品逻辑设置是否合理。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

实践效果

  • 经过两完实践,LinkE 设计师已能完全独立操作执“两章分”;
  • 业务方的参与度 & 认知度提升明显:已始习惯将“两章一分”设项目里程碑,并全员参与。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

4. 实践总结

在践程中,我们现企业中台产品的典型场大致以分为 4 个场;不同场面临的设计项目有所偏重;不同设计项目在验度量方面的切点也有所不同。譬:云凤蝶是一个典型的沉浸式画页面,所有操几乎是通编辑器属面板来整,么何来评估编辑器的效率呢?通一系列践和思考,我们提出以通“高频属查找、置的步骤数和时间”、“设置相同组件属的耗时变化”等指标进行衡量。以下是我们根据不同典型场、设计项目提出的验度量切点。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

5.

「两章一分」的未来

经 S1 长达几个月的探索:我们定“两章一分”的标准;对 30+ 产品进行易用度分数的测试,捕捉分数基;提炼操方法技巧,并赋能给各位设计师;联合设计师和业务方跑通近 20 个案例。不管是问题现数量,还是设计师、业务方的主观反馈,让我们坚定“两章一分”在企业中台产品验优化中是一个相对有效的模式。为此,S2 我们打继续深化。

如何量化用户体验?试试阿里这个新出的「两章一分法」!

  • 落标准:关键业务线将“两章一分”落到业务产环节中,不过“两章一分”就不能线;
  • 分基线:区分同产类和迭代大小,制定同的易分数基线;
  • 升方法:针对跨产品、跨域等难以推动的横向验项目,我们考虑升级方法,将用测试升级为“用户验”,以便更地推动问题落地;
  • 闭案例:针对 S1 已跑通的业,会在 S2 进行案例闭环测,以验证优化效果是否真的能在“章一”上体现出来;
  • 始运:我们会挑选些案例在公司内发声,找相关业务领域团队进交流和探讨;并从案例结和提炼设计技巧,帮助业务成长。

总结

我们团当前支持的企业中台产品以 0-1 阶段产品为主,PD 通常缺少用户意识和验优化手段,就导致设计稿还原度差、产品上手门槛高。针对一现状,我们尝试地提出“两章一分”个评价标准,从设计验收、用测试、易用度分数 3 个度来评价产品当前的验现状。

通过 S1 50+ 产品的实操,一边不断完善评价标准和实操经验,一边总结体验度量经验;共帮助 18 个产品发现 364 个产品,并在 link 、sofa 等重点产品线中落地业生产环节中,在业方层面收良好反馈。

在这过程,我们结了适合不场景、不设计项目体验度量切入,验证了这在前企业后台品确实有效。后续我们将尝试细化标准,闭环案例,内发声等,更好地动体验思维在企业后台品生根发芽;时,也期待能跟这块感兴趣朋友们多多交流。

欢迎关注作者的微信公众:「AlibabaDesign」

如何量化用户体验?试试阿里这个新出的「两章一分法」!

© 版权声明
您必须登录才能参与评论!
立即登录
暂无评论...

相关文章

上周我们谈了素材的基础知识,今天让我们谈谈该怎么把素材转化成绘画语言。绘画是区别于其他艺术的媒介,所以我们也应该把它...
插画
每次在做项目总结的时候,总想列举一些法则和方法论来增加总结的专业性以及可信服度,但是总有些熟知的方法却怎么也叫不上名...
80/20法则
您最近填写过在线表单了吗? 答案应该是肯定的。根据最近的研究,84% 的人每周至少会填写一份线上表单。 虽然你可能没有感...
用户体验
2020年初,优酷首部互动剧《当你醒来时》正式发布,并且会在未来6个月内陆续上线多款自制互动内容。 围绕优酷视频平台优势,...
AlibabaDesign
在日常工作中,我们或许会遇到这样的情景: 说不清楚交互设计师和 UI 设计师的区别,被人觉得交互设计师就只有审稿或在产品...
交互设计
随着智能技术的不断发展与深入,对话机器人的应用越来越普遍,展现了高效、24 小时在线沟通等效果,一定程度上弥补了人工客服...
AlibabaDesign
容错的定义最初来源于计算机领域,当计算机发生故障后不会崩溃,可以正常工作,并可以从错误中恢复。这个容错性是指对错误的...
产品
为什么大爷大妈们总对排队情有独钟,为什么平常不想要的东西一打折就买一堆……震惊!原来套路你的竟然都是自己的大脑! 如今...
产品