远程可用性测试的两种风格:缓和(使用主持人和屏幕共享应用程序)和不降额(任务由测试平台管理,没有主持人。

无限制的远程可用性测试比有限制的测试更受欢迎的一个原因是它被认为更便宜、更快。虽然不减额可能会节省一些金钱和时间,但可能没有你想象的那么多——而且可能会以牺牲调查结果为代价。我们比较了每种类型研究的典型成本。

影响研究费用的因素

影响学习成本的两个最大因素是您的参与者是谁以及如何招募他们. 如果您的用户群非常繁忙、稀少或富裕,那么货币成本将增加——在这些情况下,你可能需要提供更高的激励。类似地,如果您雇佣招聘机构查找并安排用户,您可能会支付比使用参与者小组更高的每次招聘费用。

这些对时间和金钱的估计假设您的组织已经建立了一个研究实践。如果出现以下情况,预计研究所需时间将超过我们的估计:

  • 利益相关者或客户必须首先确信需要进行研究。
  • 明确的研究目标尚未确定。
  • 研究人员不熟悉测试过程中使用的工具,必须花时间学习。
  • 参与者很难找到和安排。

我们的时间估算也不包括设计和制造待测试产品或原型所需的时间。

此外,我们对无减额平台订阅费为每月100美元。组织可以花更多的钱,这取决于工具。一些具有许多功能和工具的大型平台(如UserZoom)每月可能要花费数千美元。

我们包含视频会议应用程序的成本,但您可能不需要将其包含在自己的成本计算中。理想情况下,随着时间的推移,您可能会进行许多研究,这样成本就可以在各个项目中摊销。还有缓和研究,您的组织很可能已经有了用于其他目的的视频会议应用程序,因此这不是本研究的新成本。在计算成本时,您可以选择不包括该方面。

研究估计

这些是对一个项目的粗略估计典型的5-参与者定性可用性研究在美国进行。你可能会发现不同地点的成本不同,特别是所需的激励。

可用性测试是一个非常灵活和通用的工具,所以不同的变体(例如定量可用性测试,需要20-40名参与者),将有不同的成本。

表1:美国远程主持研究的典型成本估算

低估计

高估

视频会议应用程序

每月15元

30元/月

招聘费

每名参加者$0

每位参加者$80

激励措施

每位参加者$80

每名参加者$250

规划与设置

16小时

24小时

举行会议

90分钟/参与者
(60分钟会议)

分析

8小时

16小时

5人参与研究的费用

415美元+32小时

1680美元+48小时

遥控器的典型成本缓和在美国学习。在低端,一项针对5名参与者的适度研究可能需要415美元外加32个研究小时。在高端,由于招聘费用高,激励措施大,可能需要花费1680美元和48小时。

表2:美国远程未减额研究的典型成本估算

低估计

高估

平台订阅

每月$0

每月$100

招聘费

每名参加者$0

每位参加者$80

激励措施

每名参加者50元

每名参加者150元

规划与设置

4小时

12小时

举行会议

30分钟/参与者
(20分钟会议)

分析

4小时

12小时

5人参与研究的费用

250美元+11小时

1250美元+27小时

遥控器的典型成本不降额在美国学习。在低端,一项针对5名参与者的未减额研究可能需要250美元左右外加11个研究小时。在高端,由于招聘费用高,激励措施大,可能需要花费1250美元和27小时左右。

未减额可能会产生隐藏成本

根据这些粗略的估计,你可能会认为一项不降额的研究将花费从比缓和后的同等产品低20%至40%。你的研究人员也可能节省大约20小时的时间。

但请记住,确实有与使用未减额而非缓和相关的权衡测试。

如果您使用的是未降额测试平台的面板,您可能会面临更高的风险作弊者或“专业”参与者-那些只想得到报酬并继续生活的人,或者那些定期参加学习的人。您可能必须删除这些参与者并替换他们。一些平台有很好的政策,可以免费替换不活跃的参与者,但其他平台没有。为了安全起见,我们通常建议过度分泌一点。因此,与其在一项未减额的研究中测试5名参与者,不如测试6名参与者。

研究人员通常更喜欢不减量的测试,因为他们觉得这样可以节省时间-无需运行会话。但请记住,特别是在定性测试中,你应该还在看那些录音你可能会发现,无论你在主持会议上节省了多少时间,都会被转移到项目的分析阶段。

请注意上面两个估计值之间的一个很大的差异——有节制的会议计划为60分钟,而无节制的会议为20分钟。这是因为测试平台有很短的限制关于会话可以运行多长时间。由于这个原因,长而复杂的任务可能不适合于不降额的测试。如果您计划在同一个站点上测试多个任务,您可能需要招募更多的参与者(每个参与者只完成任务的一个子集)。

最后,请记住,适度测试和非适度测试之间的核心区别在于是否有促进者.与未经授权的会议相比,经过授权的会议通常会带来更集中的会议和更多的见解,这是您在未降额测试中可能会错过的内容。

考虑所有费用

对于资源有限的团队来说,无限制测试是一个很好的选择。虽然缓和测试可能会稍微贵一些,但这一成本可能值得一些团队深入了解。

只要确保你考虑你的情况(工具、时间表、用户和招聘)的所有细节,并在你做出选择时权衡你的研究目标。

要获得更多关于规划和进行远程研究的帮助,请查看我们的全天研讨会,远程可用性测试。