用户体验研究方法使用指南(翻译)
摘要:现代用户体验研究方法回答了广泛的问题。为了了解何时使用哪种方法,在典型的产品开发过程中将20种方法的每一种都跨越3个维度和时间进行映射。
用户体验领域具有广泛的研究方法,从经过实践检验的方法(如基于实验室的可用性研究)到最近开发的方法(如无主持的在线UX评估)。
虽然将全部方法应用于一个特定项目上不现实,但需要说的是几乎所有项目都能从多种研究方法和综合见解中受益。 令人惋惜的是,许多设计团队只使用一两种他们熟悉的方法。 关键问题在于什么时候该做什么。 从三维框架中各轴的角度出发,可以帮助更好地了解何时使用哪种方法,轴分别是:
•态度与行为 Attitudinal vs. Behavioral
•定性与定量 Qualitative vs. Quantitative
•使用环境 Context of Use
下表说明了20种常用方法在这些维度上出现的位置:
图:用户研究方法概观每个维度都提供了一种可以根据所回答的问题和最适合的目的来区分研究的方法。
态度 vs. 行为维度 Attitudinal vs. Behavioral
这种区别可以通过对比“人们怎么说”和“人们做什么”来总结(通常这两者是完全不同的)。态度研究的目的通常是理解或衡量人们的既定想法,这就是为什么态度研究在市场营销部门被大量使用的原因。
虽然大多数可用性研究应该更多地依赖于行为,但使用自我报告信息的方法对设计师来说仍然非常有用。例如,卡片分类提供了有关用户信息空间思维模型的见解,并有助于确定产品、应用程序或网站的最佳信息体系结构。调查可以对态度进行测量和分类,或者收集自我报告的数据,这些数据可以帮助跟踪或发现需要解决的重要问题。由于各种原因,焦点小组在可用性方面往往表现较差,但可以提供人们在小组设置中对品牌或产品概念的想法的顶级视图。
在这个维度的另一端,各研究方法主要关注的是行为,试图理解人们对所讨论的产品或服务的“行为”。例如,A/B测试将不同的网站设计版本呈现给随机选取的网站访问者,但其他访问者的网站内容保持不变,以此查看不同的网站设计选择对行为的影响,而眼动跟踪则试图了解用户如何在视觉上与界面设计交互。
在维度的两端之间有两种最流行的方法:可用性研究和实地研究。这两种方法结合了自我报告数据和行为数据,且能向维度的两端移动,「通常推荐的是倾向于行为方面。
定性 vs. 定量维度 Qualitative vs. Quantitative
这里是一个重要的区别,这种区别远远超出了狭隘的“开放式”的定性观点,如一个开放式的调查问题。更准确地说,定性研究是基于直接观察行为或态度来产生有关行为或态度的数据,而定量研究的有关行为或态度的数据则是通过测量或工具(如调查或分析工具)间接收集的。例如,在实地研究和可用性研究中,研究人员直接观察人们如何使用(或不使用)技术来满足他们的需求。这使他们能够提出问题,探究行为,甚至可能调整研究方案,以更好地实现其目标。但对数据的分析通常不是数学意义上的精确分析的。
相比之下,定量方法中的洞察通常来自数学统计分析,数据收集工具(例如,调查工具或网络服务器日志)会捕获大量易于数字化编码的数据。
由于它们之间差异的特性,定性方法更适合回答为什么或如何解决问题,而定量方法更适合回答有多少的这类型问题。拥有这些数据有助于确定资源的优先级,例如专注于影响力最大的事项。下图说明了前两个维度如何影响可以提问的问题类型:
产品使用背景
第三个区别与研究的参与者如何以及是否使用所涉及产品或服务有关。 这可以描述为:
•自然或接近自然的使用产品
•按脚本使用产品
•研究期间不使用产品
•以上的混合体
在研究自然使用产品时,目标是最大程度地减少对研究的干扰,以便尽可能了解真实情况下参与者的行为或态度。这提供了更强的有效性,但对研究主题的控制权较少。 尽管总是存在一些观察偏见,但许多人种学现场研究都试图做到这一点。 拦截调查和数据挖掘或其他分析技术是这种情况的定量示例。
按脚本对产品使用情况进行研究,可以将关注重心集中在特定的使用方面,例如新设计的流程。 脚本的设计程度可能会有所不同,具体取决于研究目的。 例如,基准研究的脚本通常编写得井井有条,并且本质上更倾向于定量方法,因此它可以产生可靠的可用性指标。
不使用产品的研究是为了研究比使用性和可用性更广泛的问题,例如对品牌或更大的文化行为的研究。
混合方法使用一种创造性的产品使用形式来达实现他们的目标。例如,参与式设计方法允许用户与可能成为产品体验一部分的设计元素进行交互并对其进行重新安排,以便于让用户讲解他提出的解决方案如何能更好地满足其需求以及他们做出某些选择的原因。概念测试方法采用的是通过对产品或服务提供的核心内容(而不是体验的细节)的粗略近似「用户术语」的表述,来了解用户是否想要或需要这样的产品或服务。。
图表中的大多数方法可以沿着一个或多个维度移动,甚至在同一个研究中也可以这样做,这样做通常是为了满足多个目标。例如,实地研究可以集中在人们怎么说(人种学调查)或者他们做什么(扩展观察);合意性研究和卡片分类有定性和定量两种版本;眼动跟踪可以是脚本式的也可以是非脚本式的。
产品开发阶段(时间维度)Phases of Product Development (the Time Dimension)
在选择研究方法时要考虑的另一个重要区别是产品开发阶段及其相关目标。
1、战略:在产品开发的初始阶段,你通常会考虑新的想法和未来的机会。这一阶段的研究方法可能有很大的不同。
2、执行:最终,当你过渡到一个不断改进所选择的设计方向的阶段时,你将到达一个“go/no-go”的决策点。这一阶段的研究主要是形成性研究,有助于降低执行风险。
3、评估:在某个时刻,有足够多的用户使用你的产品或服务,你就可以开始衡量产品的表现。这通常是针对产品本身历史数据或者其竞争对手进行的具有总结性的评估。
下表总结了这些目标,并列出了与之相关的典型研究思路和方法:
艺术还是科学?Art or Science?
虽然许多用户体验研究方法都源于科学实践,但它们的目的并不纯粹是为科学,仍然需要进行调整来满足利益相关者的需求。这就是为什么这里的方法特征仅作为一般指南,而不是严格的分类。
最后,你的工作是否成功将取决于它对改善相关网站或产品的用户体验的影响程度。这些分类旨在帮助你在正确的时间做出最佳选择。
研究方法简述 The Methods in Brief
以下是对上表列出的研究方法的简短说明:
可用性实验室研究Usability-Lab Studies:参与者与研究人员在实验室以一对一的形式,在给出的一组场景下研究,这些场景导向产品或服务的特定任务和使用。
人种学实地研究Ethnolographic Field Studies:研究人员选择最有可能遇到使用相关产品或服务的地方,在实地对参与者进行研究。
参与式设计Participatory Design:参与者被给予设计元素或创意材料,以便以一种具体的方式构建他们的理想体验,来表达对于他们来说最重要的是什么以及为什么。
焦点小组Focus Group:由3~12名参与者组成的小组就一系列主题进行讨论,并通过讨论给出口头和书面反馈。
用户访谈Interviews:研究人员与参与者一对一地深入探讨参与者对所涉及主题的看法。
眼动跟踪Eyetracking:配置眼动跟踪设备以精确测量参与者在执行任务或与网站、应用程序、实物或环境自然交互时的注视点。
可用性基准测试Usability Benchmarking:利用精确和预先设定的性能度量标准,对若干参与者进行严格按照脚本可用性研究。
有主持远程可用性研究Moderated Remote Usability Studies:使用屏幕共享软件和有远程控制功能的工具进行远程可用性研究。
无主持远程小组研究Unmoderated Remote Panel Studies:一组训练有素的参与者在自己的个人设备上安装了视频记录和数据收集软件,采用有声思维法记录他们在使用网站或产品时说出的大脑思考内容,以供研究人员或公司立即回放和分析。
概念测试Concept Testing:研究人员分享产品或服务的轮廓描述,来捕捉新概念或产品的关键要素(价值主张),以确定它是否满足目标受众的需求;它可以是一对一,也可以与多名参与者一起进行,既可以是面对面也可以是在线进行。
日记/摄像研究Diary/Camera Studies:为参与者提供一种机制(日记或摄像机)来记录和描述他们生活中与产品或服务相关的方面,或只记录他们的核心生活;日记研究通常是纵向的,只能对参与者容易记录的数据进行研究。
客户反馈Customer Feedback:自我选择的用户样本通常通过反馈链接,按钮,表单或电子邮件提供的开放式和/或封闭式信息
合意性研究Desirability Studies:为参与者提供不同的视觉设计方案和一组限定的描述性属性列表,期望参与者将每个方案与从列表中选择的一组属性相关联;这些研究可以是定性和定量的。「可参考文章Desirability Studies: Measuring Aesthetic Response to Visual Designs」
卡片分类Card Sorting:一种定量或定性的方法,要求参与者将条目分组,并为每组分配类别。此方法有助于通过揭示用户的心理模型来创建或优化网站的信息体系结构。
点击流分析Clickstream Analysis:分析用户在使用网站或软件产品时点击或浏览的屏幕或页面记录;它要求对站点进行恰当的检测或者应用程序启用遥测数据收集。
A/B测试 A/B Testing (also known as “multivariate testing,” “live testing,” or “bucket testing”)(也称为“多变量测试”、“实时测试”或“分桶测试”):一种科学评估网站不同设计效果的方法,通过随机分配用户组分别与每个不同设计的网站进行交互,并测量这些分配对用户行为产生的影响。
无主持用户体验研究Unmoderated UX Studies:是一种定量或定性的自动化方法,使用专门的研究工具捕捉参与者的行为(通过安装在参与者计算机/浏览器上的软件)和态度(通过嵌入式调查问题),通常通过让参与者使用网站或原型来完成一些目标或场景。
真实意图研究True-Intent Studies:一种随机询问网站访问者进入网站时的目标或意图,评估他们随后的行为,并询问他们在离开网站时是否完成目标的方法。
截取调查Intercept Surveys:在使用网站或应用程序时触发的调查。
电子邮件调查Surveys: :利用电子邮件招募参与者的调查。