比较两个界面时,第二个界面表现更好,可能与设计有关,也可能与参与者已经熟悉任务有关。如果同一个人连续体验两个方案,第一次经历留下的学习和印象会进入第二次。于是,报告中看见的差异,还包含一个问题:这个方案是在怎样的先前体验之后被使用和评价的?
MeasuringU的Jeff Sauro在2015年8月25日发表的方法文章,将within-subjects解释为同一批参与者体验各个界面,将between-subjects解释为各界面使用不同参与者。[1] 前一种安排允许在同一个人的经历中作比较,但体验不会在界面切换时自动归零。后一种安排也有自己的条件和取舍,本文不据此给具体项目确定招募人数或统计方法。
原文将这一问题放在carryover effects部分讨论。人会练习、学习,并可能把前一个设计中获得的经验带入后一个设计,从而改变速度、准确程度或最初印象。[1] 对设计团队来说,这意味着“先遇到哪一个”是结果解释的一部分。即使界面本身没有变化,参与者进入它时掌握的信息也可能不同。
文章所说的counterbalancing,是系统地改变方案呈现顺序,让参与者不全按同一个顺序接触设计。作者认为,这能减轻许多顺序带来的不利影响,但特别保留了“并非全部”的范围。[1] 它让某个方案不总是处于同一个先后位置,却不是把已经发生的学习从参与者身上删除。因此,不能仅因研究安排了不同顺序,就在结论里写成“顺序影响已完全排除”。
随后关于态度的段落进一步说明:顺序平衡不会抹去记忆。参与者的评价会受到此前接触内容的影响,而且影响方向不总能预先确定。[1] 例如在一个自拟的讨论情境中,团队想知道某界面单独使用时给人的印象,却让所有人先看过另一个方案,再把评价写成单独体验的结果。这里缺少的不是一句赞成或反对,而是评价所处的比较背景。这个例子没有实际参与者或测量结果。
阅读研究结论时,可以先辨认它回答的是独立体验问题,还是经历多个方案后的相对判断。两种问题都可能有研究价值,但不能省略呈现关系后当作同一种证据。本文只解释上述方法文章中的概念与局限,没有采用原文的样本量表、置信水平或检验方案,也不声称某个真实界面已经因此更易使用。
信息来源
本文基于上述公开资料整理,未使用来源页面的图片、视频或嵌入媒体。