5.2 CET 界面改进与测试评估
5.2.1 机考界面改进
根据最初机考界面排版眼动测试结论,现对听力 C 与阅读 A、B、C 四个界面重新设计,方案如下:
① 图 5.19 为听力 C 原始界面,现将整个文本的宽度变窄,改为图 5.20 排版。
② 图 5.21 为阅读 A 原始界面,这一道阅读题的任务是要求考生在 15 个单词中选择 10 个填入短文中。纸质试卷对于该题的版式安排是将 15 个单词安排在文章的上面,但在考试考试阅读习惯的研究中发现,考生阅读时存在两种不同的阅读习惯,有些考生先看 15 个单词,而有些则先看文章,因此在这里将按照不同的阅读习惯进行两种排版,如图 5.22 和图 5.23;但在整体考试系统版面设计中,页面都是采取左右页面排版的方式,因此也设计了 15 个单词和短文排版在左右页的界面(图 5.24、图 5.25)。
③ 图 5.26 是阅读 B 的原始版面,其中专门设置了答案填写处,并将它们一同安排在所有选项的上面,但在测试中发现,这种方式并没有让被测达到他们方便阅读、作答的目标。根据被测反馈与用户体验观察重新设计的版式(如图 5.27)将答案填写框直接安排在各个题目左边。
④ 图 5.28 为阅读 C 的原始版面,右边的页面用英语显示题目,当切换到后面的题目时需要切换到另一张页面。根据实验中发现这种翻页方式并没有符合考生做题的习惯,在重新设计中,将右边的选择题部分也设计成滚动条形式(图 5.29)。这里同时提供了另一种排版形式,将文章显示完整,题目部分仍然按照滚动条的形式。
5.2.2 界面改进方案眼动测试评估
(1)实验材料
试验材料为在界面排版形式上改进过的大学英语四级机考界面设计方案。
(2)实验器材
① 由美国 ASL 应用科学实验室生产的 Mobile Eye-XG Eye Tracking Glasses, 这款眼动追踪眼镜优点在于其轻便便携,这样就可以减少在实验中由实验器材造成的被测不适而带来的误差。② Eye Tracking Glasses 配套无线连接主机一台。③ASL Eye TrackingGlasses 配套 DELL 电脑一台。
(3)被测
实验中的被测是正在备考大学英语四级的 19-22 岁大学生,其左右眼裸眼视力都在0.8 以上(为保证数据准确),其中男生 4 名,女生 4 名。
(4)实验流程
① 实验中被测在眼动定标结束后被要求观察大学四级机考界面并进行模拟操作,如在输入个人信息后进入听力部分进行答案选择,填写输入框等。让被测在自己操作下对整个机考界面设计方案进行使用体验。在实验过程中被测没有像在笔考纸质试卷实验中的题目测试,这里只是对界面体验进行评估。每一位被测眼动测试时间不超过 10 分钟。数据记录从被测开始熟悉试卷阶段开始。
② 被测摘下眼睛之后被要求填写一份可用性评估调查问卷。
(5)眼动测试数据分析
这里主要分析视点图与热点图,实验中视点顺序图中绿色的注视点越大代表注视时间越长,越小注视时间越短。将他们连接起来的线代表视点路径。这些视点图可以反映考生在观察试卷时的阅读习惯。
听力 C 与阅读 A、B、C 四个界面重新设计后的注视点顺序图如下:
① 把图 5.31 为听力整个文本的宽度变窄,改为图 5.32 排版。通过被测视点图分析可以看出,考生可以将试点集中在相对小的范围内,减少远距离视跳。
② 将图 5.33 中的文本宽度变窄后并相应的调整 15 个单词的上下结构后,其视点如图 5.34 和图 5.35.左侧的第一视点都落在 15 个单词上面,整体视跳距离有所缩短。图 5.36 和图 5.37 是将选项刚和文章按照整体考试系统的版式进行布置,发现大多数被测第一视点还是会落在 15 个选项上面,这与考生的考试阅读习惯相关。这种左右排版的阅读视点图类似于阅读 C 中的阅读视点图。
③ 图 5.39 是修改过的阅读 B 版面。在把答案填写框的位置放置在每一个题目左侧时,减少了回视点,为考生在考试过程中节省时间。
④ 将原本的翻页形式显示剩余题目的方式改为滚动条形式,由图 5.41 中视点 2、3可以看出被测可以非常容易的在同一水平位置发现分别让左右两页显示完整的方式,相比 5.40 原始版面中的视点 1-5 被测才能找到全两个显示完整的操作方式,更加清晰。
(6)被测可用性问卷分析
这里被测要求填写的可用性评估调查问卷仅有两题,内容如下:
① 请问机考试题与笔考纸质试卷题目呈现形式您更喜欢哪一个?
A 笔考试卷 B 机考试卷② 请问这份试卷试题排版形式对您的答题产生怎样的影响?(请在下面的数轴上标出)在 4.3.2.3 中已经要求被测对整个模拟的考试系统进行统一的体验测试评估,实验主要用于完善越有设计中不足的四张版面,因此此处主要测考生的满意度,以及与考生试卷阅读和答题习惯的符合程度。
红色柱状图代表原设计,黄色柱状图代表经过修改过的被测满意度评分,圈出的为满意度较高的版式结构设计方案(图 5.32、5.36、5.39、5.40)。在整体试卷系统的考生满意度评估中,有 90%的被测都更加倾向于机考试卷形式。这种结论证明本课题中提出的机考界面设计方法具有科学性与可取性。