此文章翻译自发表在 Nielsen Norman Group 的文章 Writing Tasks for Quantitative and Qualitative Usability Studies, 原作者是Kate Meyer。
摘要:所有的可用性研究都涉及到要求参与者完成任务,但是拟定这些任务的正确方法取决于你使用的研究方法。好的定量任务应该是具体且焦点明确的,而好的定性任务则是开放,灵活,且富有探索性的。
对于任何一种可用性测试来说,都需要一系列经过精心设计的任务来获得成功。无论使用哪一种具体的研究方法,你的任务中总是应该有一些共同的特性。然而,要具体地评判一个方法的优劣,则需要考虑可用性研究是定量的还是定性的。
背景知识:定量研究 vs. 定性研究
定量和定性的可用性测试存在很多不同。它们对应着不同的研究目标。
定量研究与科学实验十分类似,它通过严格的可操纵环境来实现对某些指标的捕获。(如完成任务的成功与否或用时)
相对应地,定性研究可用来发现用户界面中的问题。定性研究旨在通过对单个用户进行实验的过程中,了解参与者在其过程中的思维和遇到的困难。这种研究方法通常给用户呈现一个开放式的活动,通过这样的方式,就可能可以发现用户界面中存在的问题。
大致总结一下,定量研究获取的是数据,定性研究获取的是想法。
鉴于这两种方法在目标和特点上有很大的差异,你需要针对不同的方法撰写不同的任务。在很多情况下,一个适用于定性研究的方法可能完全无法用在定性研究上,反之亦然。
无论为哪一种方法制定任务时……
- 考察用户需要用产品做什么,以此来获得灵感。 要牢记,任务要尽可能地贴近实际。你不能让参与者去做一些在他们生活中根本不会做的,或者你可以预知到与项目无关的事情。可以用用户访谈,搜索日志的数据,客服热线和分析数据来确定用户使用你的产品做什么。
- 不要唐突地在任务中提供线索。不要向用户描述它们具体需要采取的步骤——让他们自己去发现。不要提到用户界面中用到的文字标签。你是不会希望用具体的文字来引导用户的。
不要这样:注册 Alertbox。
改进方案:注册这个网站的通讯。 - 尽量让任务保持情感中立。在拟定任务的时候,不要对用户的私人生活或人际关系进行假设。如果可以的话,在任务中最好是使用“朋友”这样的人物,不要使用诸如“父亲”或“配偶”或者其他的家庭成员。
不要这样:给你的母亲挑选一件生日礼物。
改进方案:给你的朋友挑选一件生日礼物。 - 对任务进行预测试。这一步十分重要,但是很多研究者都跳过了它。你也许觉得你的任务没有问题,但是在你没有在一两个用户身上实施过的话,你就不能确保这一点。在研究预算表和时间表中一定要为预测试留下空间。这样会让你避免在不小心使用了不当的任务而浪费研究资源,也能避免你拿到不理想的数据。
为定性研究拟定任务时……
- 可以使用开放式的任务。对于定性研究,可以让(参与者)对任务的解读不唯一。即便有些时候需要给用户确定明确的指标,你也可以保持任务的开放性,来考察用户真正关心的是什么,以及什么样的因素会影响他们做出决定。
开放式定性任务:开一张你需要的信用卡。
具体的定性任务:开一张“刷卡返现”信用卡。 - 为你设定的场景提供足够的细节,但不要过多。确保为参与者建立完成任务的动机是很重要的,但也没必要为此长篇大论。如果已经确保参与者可以代表实际用户,并且这个任务对他来说是实际的,那就不需要提供太多的背景信息了。
- 如果没有得到想要的想法,那就换一个任务。在定性研究中,中途改变任务指导语,或者甚至临时添加新的任务,都是没有问题的。定性研究的目的就是得到有用的观测,所以你并不需要让每个参与者都去完成一样的任务。(事实上,重复无用的任务会浪费参与者宝贵的时间)
为定量研究拟定任务时……
- 确保完成任务的路径只有一条。与定性任务不同,定量任务必须有唯一的解读和解决方案,这个是必须要明确的。
如果指导语太过与宽泛或开放,每个参与者都可能会执行本质上不同的任务,并且在界面中产生不同的路径。这样,你收集到的将会是对不同事物的度量,并且数据之间会产生很大的出入。那么,当解决方案不止一种的时候,你应该把那个算作是“成功的”呢?不要这样:开一张你需要的信用卡。
改进方案:开一张“刷卡返现”信用卡。 - 不遗余力地提供必要的细节,确保任务是准确且焦点明晰的。有些时候,这样意味着在定性研究中,提供的细节应该留有余量。
你通常会觉得你已经提供了足够的细节,但是在接下来的预测试中,你会发现你遗漏了一些东西。例如,只告诉用户在什么时候预订哪家酒店是不够的——你也需要告诉他们预订哪种房间。在定性研究中,这种说明往往不太必要,但是在定量研究中,确保每个用户完成的是一样的任务则显得十分有必要。不要这样:“在芝加哥的 Hyatt Regency 酒店预定一间两人房,从一月十七号住到一月十九号。”
改进方案:在芝加哥的 Hyatt Regency 酒店预定一间两人的大床房,从一月十七号住到一月十九号。” - 提供模拟凭证(假数据)用于注册,登陆和其他需要输入个人信息的任务。让每个人都输入相同的信息,就可以使差异最小化。所有的参与者都输入相同的字符。此外,在需要自己个人信息的时候,一些人会比其他人更犹豫。得出一个可以接受的解决方案也需要花费额外的时间。(对于许多定性研究来说,你也许就要让参与者使用他们的真实信息)
- 每个任务都应该是独立的。最理想的情况是,你可以将定量研究中的任务顺序随机化。如果有两个任务相互关联,这两个任务就必须得以相同的顺序执行。此外,对在第一个任务中失败的人,也无法继续进行第二个关联的任务。
不要这样:
- 任务一:找到 Joe Smith 的个人档案。
- 任务二:在 Joe Smith 的档案页里在找到他的直系上级。
改进方案:
- 任务一:找到 Joe Smith 的个人档案。
- 任务二:在这个链接指向的页面里,找到 Jim Grant 的直系上级。
- 每个任务应该有一个单一的成功指标。不要把两个任务合并成一个。在定量研究中,需要一个简单且清晰的结束点,来帮助你记录用户在任务上花费的时间,以及用户是否成功完成了任务。如果在单个任务中定义了多个成功的标志,那么在用户找到了其中的一条信息,但是没有找着其他的,这样该怎么算呢?可以把复合的任务进行拆分,这样问题就能得到很好的解决。
不要这样:找到博物馆的地址和放假时间。
改进方案:
- 任务一:找到博物馆的地址。
- 任务二:找到博物馆的放假时间。
- 一旦开始了研究,就不要改变任务了。在定量研究中,确保每个参与者所执行的任务是相同的,这一点非常重要。在这样的研究中,应该始终控制好除自变量(例如,你的产品 vs 你的竞品)以外所有的条件。也就是说,你不应该在研究的中途想到去改变你任务的指导语。这样会污染你的最终结果。预测试对任何研究都很重要,但是对定量研究来说显得尤为重要,因为你并不能在研究中途对研究方案进行改变。
- 把重点放在主要任务上。定量研究成本非常高,所以用它来做一些对你的用户和组织来说优先级不高的测试的话,就显得并不是很划算。尽管定性研究的灵活性使得它可以被用测试一些不太常用的事项,但定量研究必须将重心放在最重要的核心任务上。
总结:定性任务 vs. 定量任务
定性任务 | 定量任务 | |
---|---|---|
任务性质 | 开放,灵活,有探索性 | 具体,焦点明确 |
指导语措辞 中的细节多少 |
提供必要的细节 以建立动机 |
提供必要的细节 确保任务成功的路径 是唯一的 |
任务顺序的随机化 | 有则更优 但非必需 |
必需 |
在研究中途改变任务 | ✓ | ✗ |
基于用户研究的 切合实际的实际任务 |
✓ | ✓ |
指导语中不包含线索 | ✓ | ✓ |
情感中立的任务 | ✓ | ✓ |
提供假数据 | ✓ | ✓ |
对任务进行预测试 | ✓ | ✓ |
不管你准备施行哪种研究,拟定优质的任务都需要通过练习来掌握。