炸金花

Optimal WorkShop在线用研工具分享

Optimal WorkShop(www.optimalworkshop.com,以下简称OWS)是一个在线的可用性测试网站,主要提供Treejack(导航菜单测试)、ChalkMark(首次点击测试)、OptimalSort(卡片分类)、Questions(问卷调查)、Reframer(实验日志)几个常用的可用性实验工具。炸金花资料只要通过在线的方式就可以完成实验的所有环节,大大降低了进行可用性实验的难度和复杂度,帮助设计师和用研人员从繁琐的实验流程和文档中解放出来,将工作重点落回到实验目的本身,从而帮助设计团队理解用户认知、提升用户体验。

该网站可以使用邮箱注册,注册后即可使用。实验工具分为免费版和付费版,免费版存在一定的限制,比如每次实验的被试人数不能超过10个,卡片的数量不能超过30张等。虽然免费版有这些不足,但是足够支撑炸金花资料开展一些小规模的实验。如果需要经常进行大规模实验可以使用付费版的包月模式,如果只是偶尔进行大规模实验可以使用单次付费模式。

使用OWS进行可用性实验时主要包括实验设计、实验开展、实验分析三个使用步骤。试验设计阶段主要包括实验基本信息、实验材料、实验任务、实验说明、调查问卷;实验开展阶段主要包括招募被试、预实验、正式实验等;实验分析阶段主要包括定性分析和定量分析两大类指标。

导航菜单测试、首次点击测试、卡片分类、问卷调查这几个实验的实验步骤相似,只是在实验材料、实验任务和实验分析环节有所差异,在实际使用过程中稍作调整即可;而实验日志工具主要是让实验员用来记录实验,它的作用和笔记类产品类似,所以在此不做展开。信息架构测试主要是通过让被试查找特定标签或内容以检验信息架构的可用性,下面以导航菜单测试为例对使用步骤进行详细介绍。

1、创建实验:注册并登录,在首页点击“My Account”进入Dashboard页面,点击“Create new study”,在下拉菜单中点击“Treejack”创建新的实验。

2、设计实验:创建新实验时会自动进入实验设计页面,需要设置以下几类信息。

  • Settings(基本信息设置):主要包括实验名称、测试地址、语言(支持中文)等。
  • Tree(信息架构):信息架构是实验最主要的材料,可以采用逐个添加或者批量导入的方式添加信息架构;可以通过拖动标签行来调整树状结构;“Options”选项里还可以控制实验时树状图是指定顺序显示,还是随机顺序显示。
  • Tasks(实验任务):为信息架构测试添加实验任务,如让被试查找特定标签或内容;还需要为实验任务添加对应的正确答案,即让被试查找的内容在信息架构中的正确位置;在“Options”选项里可以控制实验过程中任务以固定顺序出现还是随机顺序出现以及是否允许被试放弃实验任务。
  • Messages(提示信息):设置被试在实验过程中需要看到的提示信息,包括欢迎语、实验介绍、致谢语和实验结束提示;系统默认给出的是一些英文提示,在中文测试环境下,炸金花资料需要把它们转换成中文。因为在线测试过程中不会直接面对被试,因此清晰的实验提示非常重要。
  • Questionnaire(实验问卷):问卷分为实验前问卷和实验后问卷,实验前问卷可用来收集用户基本信息,试验后问卷可用来收集用户的主观评价;问卷支持文本输入、单选、复选、李克特量表等类型的问题。
  • Appearance、Recruit(外观、被试招募):这两部分内容都属于增值服务可以不用设置,因此在此不展开。

在实验设计过程中,炸金花资料可以随时点击页面上的“Preview”按钮预览实验的效果。如果在预览过程中发现问题可以对实验进行调整;如果没有问题,点击页面上的“Launch”按钮即可正式发布实验。至此,实验设计部分基本结束。

3、开展实验

  • 招募被试:因为是在线的测试环境,所以被试的招募范围变得更广,不再受空间和时间得约束。炸金花资料可以通过线上线下各类渠道招募被试,但是如果想要更快速的招募实验被试,网站还提供了付费的被试招募服务(还未尝试过该服务,目测国外用户居多)。
  • 预实验:实际的实验情况难以预料,因此有条件的话最好在正式实验开始之前先进行一些预实验,并根据预实验的结果来修正实验设计以避免因为实验设计问题所带来的影响。
  • 正式实验:炸金花资料只需要通过各种渠道把实验测试地址的链接发送给被试用户即可。不过因为是在线测试,实验人员看不到被试的实验过程,为了保证实验的准确性,在每个被试正式开始实验之前最好特别和他们强调一下实验的连贯性,即不要在实验过程中进行其他任务以免影响实验的准确性。

4、实验分析

实验一经发布随时都可以查看实时的分析结果,不同类型的实验分析维度也不同。炸金花资料还是以信息架构测试实验为例,在Dashboard页面或Studies页面,找到前面创建的实验,点击“Results”按钮进入结果分析页面。

实验结果页面分为4个tab页,每个tab页面的内容如下:

  • Overview(实验概览):包括了Summary(实验摘要)和Overall(整体情况)。实验摘要记录了实验开始时间、当前实验状态和被试在试验中的表现;整体情况分析了实验时间、成功率和任务完成率等数据。
  • Analysis(实验分析):该tab页包含了实验结果分析的主要内容,包括Participants(实验对象)、Questionnaire(问卷)、Task Results(任务完成情况)、First Click(首次点击)、Paths(操作路径)、Destinations(目的地)。
  1. Participants(实验对象):显示了所有参与实验的被试信息,可以通过INCLUDE开关控制某个被试的实验结果是否纳入实验分析范围,这个功能可以用来分析不同类别被试的实验结果,或者用来排除存在问题的被试数据。
  2. Questionnaire(问卷):统计实验前问卷和实验后问卷的结果,这部分结果是分析被试主观评价的主要内容。
  3. Task Results(任务完成情况):通过饼图来分析每个实验任务的完成情况,还可以点击“View the Pietree”生成饼-树图进行更加详细的分析,通过饼-树图可以非常直观的看到被试在完成目标任务时的路径分布情况。
  4. First Click(首次点击):分析被试在每个实验任务开始时首次点击的分布情况。
  5. Paths(操作路径):分析实验任务中每个被试点击操作的完整路径,路径中的箭头向右表示前进一级,箭头向左表示后退一级。在一个实验任务的操作路径中,如果只有右箭头那么表示实验任务完成地非常流畅;如果两类箭头反复出现,则表示实验任务完成的非常不理想。
  6. Destinations(目的地):分析被试最终定义的实验任务正确答案的分布情况,图中左侧是信息架构的树状图,右侧是不同实验任务的分布情况。
  7. Downloads(下载数据):如果有需要,实验人员还可以导出实验的详细数据,自行进行更深入的分析。
  8. Sharing(分享):最后是实验结果的分享设置,可以公开分享,也可以通过分享链接或者创建访问密码进行私密分享。并且还可以通过“Shared Tabs”设置要分享哪些分析内容,炸金花资料可以便捷地和组内外成员共享实验的分析结果。

以上便是使用Optimal WorkShop进行可用性测试实验的主要步骤,它可以帮助炸金花资料快速地进行产品可用性验证,这类工具在国内目前还是非常的匮乏,因此值得尝试。其他几个实验的操作也同样很简单,因为篇幅有限在此不做展开,大家可以自己进行尝试。

1