用研方法 --- 树形图测试,信息架构的快速迭代和测试

在之前一篇关于GOV.UK的文章中写到了树形图测试(Tree Testing)的研究方法,后来又在其他很多地方看到相关的内容。出于好奇就搜索了一下,找到几篇文章,在这里整理一下。

树形图测试,又称为反向卡片分类(reverse card sorting)或基于卡片的分类(card-based classification)。大型网站/应用的内容通常以主题和子主题构成的结构性组织呈现,树形图测试便是测量用户在这个结构中寻找到目标内容的效率,其结果为网站/产品的信息架构和导航设计提供一系列评测指标。

树形图测试的基本方法:

1. 确定测试的目的:适用于基线研究、新架构的验证性研究及不同架构方案的对比性研究;

2. 将网站/产品的信息架构以卡片的形式表现出来,示例见图1;

3. 确定测试的任务和参与用户;

4. 测试数据指标的记录和分析。


图1.树形图示例(Donna Spencer,2003,左;Dave OBrien, 2009,右)


树形图测试回答的问题

1. 用户能否在当前的树(信息架构)中找到任务的目标内容?

2. 用户能否直接找到目标内容,而不需要在内容之间回返?

3. 是否用户能够在主题间快速切换,而不需要过度的思考?

4. 总体而言,信息架构中的哪些部分是成功的,哪些是有问题的?


树形图测试中关注的指标

1. 用户在树上的行为路径;

2. 用户是否成功的找到任务目标;

3. 用户的犹豫和回返行为;


使用树形图测试的优势

1. 与闭合的卡片分类(closed card sorting)相比,开片分类告诉研究者用户在文件/信息归类方面的倾向,而树形图测试则揭示用户如何寻找信息;

2. 使用树形图测试能够避免在测试信息架构的过程中被界面UI、帮助信息和其他因素(如搜索功能)的影响;

3. 树形图测试不需要真正成型的产品/线框图,便于在设计的早期进行,能够降低试错成本。


你可能关注的问题

1. 在树形图中需要包括全部的信息架构吗?

YES:如果你的架构中包含不多于100个主题和子主题;全新的信息架构;

NO:主题和子主题成百上千(支持把不必要的都删掉,然后就变100以下了...);信息架构微调;

另外,Jeff Sauro推荐在测试中包含:a) 跨主题/部门的元素;b) 涉及核心任务流程的元素;c) 在开放式卡片分类测试中存在争议的元素。

2. 需要测试多少用户?

下图为Jeff Sauro提供的95%的置信度下样本量VS.误差界限表。举个栗子:当样本量为93人时,如果50%的用户完成任务,则意味着:在相同的树形图测试任务中,你有95%地把握全体用户中的40~60%能够正确地找到任务目标。

图2.样本量VS.误差界限(CI=95%)

3. 需要预设多少个测试任务?

视情况而定。Jeff Sauro的经验是:14个任务的测试花费大概17分钟,30个任务的测试花费的时间再53分钟(每个任务完成后还包括对任务自信和主观难度的测试)。

4. 树形图测试如何与其他可用性研究方法结合使用?

Jeff Sauro提供了一个不错的例子:将任务自信评分和主观难度(SEQ)评分相结合。另外,通过比较树形图测试和已上线产品的可用性测试结果,能够判断你的界面设计、帮助信息和搜索功能是帮助还是在阻碍用户获取信息。

5. 可用的在线工具

Dave OBrien中描述了他们根据Donna Spencer的文章和线下交流所设计的在线树形图测试工具---Treejack

UserZoom也提供类似的在线工具,与Jeff Sauro合作完成了相当多次测试。


测试介绍:本案例介绍了一次树形图测试的基本内容,翻译于Donna Spencer,2003。

1. 自我介绍:

在每次测试中,花一两分钟来做自我介绍,让参与者知道你为什么这样做。告知他们,测试只需要很短的时间,并给他们任何需要的相关背景信息。这些时间有助于用户平复紧张和不安,并提供一些初步的反馈。

我通常使用介绍是:

“你好,我是Donna Maurer,这是[我的同事],我们为[我的部门]工作。我们正在对我们的网站做一些改进。我们做了一些研究,并提出了一种不同的信息排布的方式。但在它真正应用之前,我想确保它对用户是有意义的。我需要大约15分钟来测试它。你不需要任何背景信息或特殊技能。”

“我要请你告诉我你怎么寻找某些信息。在这些卡片上是我了解到的人们当前在网站上寻找的信息。我会请你选择一个任务,然后我会给你一个列表。我希望你告诉我在列表中你首先选择的信息是什么。”

“然后我会给你和你选择的信息相关的卡片,让你告诉我你下一步你会选择什么。如果它上面都没有你希望选择的,则回到上一张卡片重新选择。要注意的是,在一个任务中,我们不会让你进行超过两次的选择。这不是寻宝活动,它是对对我们是否有把对你有用的信息放在正确的地方的一次检验。如果这些你听着不太明白,不用担心,一旦我们开始做了你就会理解的。另外,如果这些卡上的任务你不会做或认为没有意义,直接跳过它们吧。”

“最后,[我的同事]在我们进行测试的过程中会要记录一些笔记。”

2. 呈现任务场景

a) 确保用户完成了任务的阅读,将最上层的标签卡在表上,并问:“在这些选择中,你会到哪里去寻找信息?”

b) 用户作出选择。对于该项目,将次级标签卡放在桌子上,并问,“你现在会去到哪里寻找信息?”

c) 对于用户的每次选择,将相应的卡片放在桌子上,直到达到分类的最低层级。

d) 让同事记录任务ID和分类号。然后更改任务,拿起除顶层以外的所有卡,重新开始。在任务中,如果参与者看起来犹豫,问他是否想再次选择。

3. 测试结果的记录和分析:

树形图测试的结果由着不同的分析方式:

Donna Spencer的文章中提供的方式为:分析不同用户/群体的最终选择的一致性情况;

Dave OBrien的Treejack工具则提供更详细的任务完成度分析、任务路径图和最终选择的一致性图表;


拓展阅读:对更多案例感兴趣的朋友可以看看Grace G Lau在Boxes and Arrows 上更新的文章,讲述了如何通过树形图测试检测厨房中物品的安置。文章中解析了Treejack的测试结果,会对深入了解如何分析和解释树形图测试结果有很大的帮助:Could You Hand Me the Dry Rub Please?

PS. 港真,我接触用研的时间也不算短了。从研一开始到现在毕业季,断断续续也有近两年时间,还是最近才了解到‘树形图测试’的概念。之前整理可用性测试用的量表时发现大家用的都是很早以前编制的量表,感觉好像我们已经停止探索了...  这次对TreeTest的新发现首先反映了我在学习方面的不足,但同时也增长了对用户研究的热情。

参考文献

Dave OBrien, 2009, Tree Testing

Donna Spencer, 2003, Card-Based Classification

Jeff Sauro, 2013, Using Tree-testing to test information architecture

Summer,2012,树形图测试---快速评估网站构架

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,362评论 5 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,330评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,247评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,560评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,580评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,569评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,929评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,587评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,840评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,596评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,678评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,366评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,945评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,929评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,165评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,271评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,403评论 2 342

推荐阅读更多精彩内容