可用性及其测试方法

可用性及其测试方法可用性及其测试方法浙江理工大学心理学研究所葛列众博士教授[e-mail]可用性测试的案例分析谢谢！谢谢！可用性概念可用性概念z可用性是产品的一个基本的自然属性，是最终用户使用产品的可用的程度。z可用性是在产品和用户的相互作用中体现出来。z可用性的基本评价指标是效率、满意和安全（容错，无错）。z可用性研究是个多学科参与的研究。z可用性研究通过对用户、产品和环境交互的研究，来实现用户高效、满意和安全地使用产品。可用性研究的三个学科群可用性研究的三个学科群z较多地关注人的学科：心理学科、社会学科、人体测量学等；z较多地关注人、产品和环境交互的学科：工程心理学科（人类工效学）、设计学科等；z较多地关注产品本身的学科：材料学科、能源学科和技术学科等可用性测试方法可用性测试方法z测试的方法z测试的工具和设备测试的方法测试的方法z测试方法种类繁多，已经有不少的介绍。例如：://://根据研究中搜集数据的类型和方式，我们把可用性测试的方法大致分为主观、客观测试两大类。主观、客观测试的比较主观、客观测试的比较实验控制原型和成型产品的评价实验室或现场仪器记录客观测试研究误差产品设计的不同阶段问卷、讨论和会议用户主诉主观测试注意点适用处搜集方式数据类型我们提倡在可用性测试中采用一种结合主观和客观测试的综合方法。这有两种形式：•对同一测试内容在同时采用多指标的测试•对同一测试内容在不同时间采用采用多指标的测试软件操作时，表情，操作和语言软件操作时，表情，操作和语言的的多重记录多重记录可用性测试方法列表可用性测试方法列表测试的工具和设备测试的工具和设备z测试量表:自编量表，标准量表z常用的测试设备：眼动仪、动作分析仪，实时监控设备z专门的测试软件：网上和单机。美国国家标准及技术研究所(NationalInstituteofStandardsandTechnology，NIST)开发的WebMetrics套件和公司的NetRaker套件。（参见：网页可用性在线测试，人类工效学，2004，2期，6月，17－19页。）自编量表自编量表z产品用户模型的研究：这类研究调查的被试较多，得到的数据主要是为产品的原型设计或者完善服务的。–确定特定产品的用户特征（解决的问题是×××型号的手机目标用户群）；–特定用户的产品特征（确定的是××年龄段×性别的用户偏爱的手机特点，比如，主色调偏爱银白色等等）。–产品特征偏爱的调查：确定特定产品特征的用户的偏爱。z产品操作的主观调查：这类研究被试校对较少，数据是为了补充客观测试数据。–用户基本情况的调查–操作前和操作后测试量表两类。z注意点：量表的标准化。建议的参考书：社会研究方法教程，袁方等，北京大学出版社，97年。网上的手机特征调查网上的手机特征调查用户基本情况的调查用户基本情况的调查z作为可用性分析基本数据的类分析的依据。z实例：–您的个人情况（单选）–1、性别（1）男（2）女–2、年龄（请填写年龄）（）–你现在使用的手机是：（1）直板式（2）翻盖式–你曾经使用过几款手机：（1）1款（2）2款（3）3款（4）4款及以上操作前测试量表操作前测试量表z对外在可用性特征（外形，尺寸、颜色等）的测试z例如：1、请您对这五款手机的重量合适程度排序2、请您对这五款手机的颜色搭配排序3、请您对这五款手机的大小尺寸合适程度排序4、请您对这五款手机的外形设计喜欢程度排序操作后测试量表操作后测试量表z产品操作后的主观体验的测量z例如：请您根据实际情况进行打分，1为很不符合，7为非常符合1、拍摄操作此款手机的拍摄功能令我满意1234567此款手机的拍摄功能操作效率很高1234567学会此款手机的拍摄操作是容易的1234567标准量表－标准量表－SUMISUMI•Primarydesignedfor•Measuringendusersatisfaction•Screenoutput,keyboard&-pointingdevice•Officesoftware•Questionnaire•50items•1Globalscale,5sub-scales,10itemspersub-scale•~10minutestocompletetheinventory•Data23113212312020132132321232321232312122321232123210011stitemMissingresponseAgreeUndecidedDisagreeUserno.眼动仪眼动仪z一种专门用来记录人眼观察时各种数据（首视点，眼动轨迹，瞳孔变化）的专门设备。根据这些数据，可以用来评价被测试产品的可用性。z眼动仪还有一些专用软件（gazetracker）。这些专用软件可记录用户使用被测试软件过程中的眼动数据（扫描路径，注视点驻留时间和分布等）。眼动仪及其实验的情景眼动仪及其实验的情景记录的瞳孔变化记录的瞳孔变化眼动仪记录的眼动轨迹眼动仪记录的眼动轨迹网页评价时眼睛注视时间网页评价时眼睛注视时间网页评价眼动轨迹网页评价眼动轨迹广告设计的眼动评价（广告设计的眼动评价（AOIAOI））汽车驾驶台操作的眼动记录汽车驾驶台操作的眼动记录手机外形的眼动评价手机外形的眼动评价手机操作的眼动记录手机操作的眼动记录动作分析仪动作分析仪z动作分析仪主要用来记录分析用户操作特定产品时操作特征。z例如：荷兰NoldusInformationTechnologybv公司生产的Noldus系统。z综合指标的实验（脸部表情，操作轨迹和操作时间）NoldusNoldus系统系统动作分析仪的测试指标动作分析仪的测试指标z完成特定任务的时间；z完成特定任务的正确率；z运动点在不同区域移动的路径（比如手指在操作键盘时，完成特定任务时按键操作路径、路程）；z运动点在特定区域中停留的时间（比如手指在完成特定任务时，在各按键上停留的时间，总的操作时间）；火车编组时的动作分析火车编组时的动作分析超市收银员的操作，收银台和超市收银员的操作，收银台和收银机的设计收银机的设计掌上电脑的测评掌上电脑的测评衣服设计的可用性评价衣服设计的可用性评价实时监控设备实时监控设备z可用性测试实验室的常用设备z主要用途：焦点小组讨论的实时记录（声音和图象），产品操作行为（特别是大动作）图象、话音记录。z注意点：数据分析（荷兰NoldusInformationTechnology动作分析软件可提供自动分析）。理工大学心理所可用性实验室理工大学心理所可用性实验室动作分析实验室产品可用性评价实验室监控室眼动仪1616导实时监控设备导实时监控设备可用性测试的案例分析可用性测试的案例分析z对以下四款高端手机的可用性进行测试比较z1．CECE2800+z2．多普达696z3．联想G900z4．诺基亚6600zNoldus动作分析系统z实验的步骤z实验指标z初步的实验结果测试的四款手机测试的四款手机CECE2800多普达696联想G900NOKIA6600手机区域定位手机区域定位11实验时手指移动实验时手指移动轨迹的记录轨迹的记录实验的步骤实验的步骤z填写被试情况登记表z测试指导语z呈现测试的手机，并填写操作测试前量表。z被试对四种典型操作任务进行操作，Noldus记录操作过程。z每种任务操作完成后，被试填写操作后问卷。z四个手机全部任务操作完成后，被试填写操作测试后量表z整理数据和实验报告。实验指标实验指标z实验指标有两类：–主观量表的数据：z态度量表得分z人数比例分布–Noldus记录的数据：z完成特定任务的时间；z完成特定任务的正确率；z手指在完成特定任务时，按键操作路径，路程；z手指在完成特定任务时，在各按键上停留的时间，总的操作时间；z手指在完成特定任务时,手指的蜿蜒度。NoldusNoldus初步的实验结果初步的实验结果z手机A操作时间短，路程长，蜿蜒度大。z手机B操作时间长，路程短，蜿蜒度小。01020304050手机A手机B操作时间（s）0102030405060手机A手机B操作路程（cm）0100200300400500600手机A手机B蜿蜒度（d/cm）主观评价的结果主观评价的结果4.14.24.34.44.54.64.74.84.95操作满意度操作效率学习容易度手机A手机B00.511.522.533.5操作前满意度操作前愿意购买操作后满意度操作后愿意购买手机A手机B四种典型任务操作四种典型任务操作z拍摄操作z电话本操作z设置操作z短信操作（1）发短信给一个新号码（13116745461），内容另见附件（2）发短信给王晓平，内容为“你好”（3）查找王晓平的短信并回复“好的”（4）存储王晓平的短信z操作情景手机操作的实验情景手机操作的实验情景