第五章-听觉显示器

工程心理学©浙江理工大学心理学系工程心理学配套课件编写者：王笃明第五章听觉显示器第二部分界面设计工程心理学©浙江理工大学心理学系本章目录第一节听觉显示器概述第二节听觉界面设计第三节听觉告警设计工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点三、听觉显示器的必要性及其适用场合四、听觉显示器的一般设计原则工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类（二）基于声音特性的分类（三）基于显示设备的分类工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类•1、反馈听觉显示器•2、辅助听觉显示器•3、告警听觉显示器工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类•1、反馈听觉显示器通过声音对关于系统操作行为提供完成与否或正确与否的结果反馈，或对系统当前状态予以声音提示根据其反馈内容可以分为：−操作行为反馈：触摸屏菜单、图标等的选择声，按键声音，相机拍照−系统状态信息反馈：手机电量不足提示、开机、正在拨号、无人接听工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类•1、反馈听觉显示器2、辅助听觉显示器在视觉受限或视觉通道负荷过重的情况下，采用听觉显示的方式向使用者传递相关信息的装置工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类•1、反馈听觉显示器2、辅助听觉显示器3、告警听觉显示器告警信息听觉显示器指当人-机系统中某一环节或部件出现故障或发生意外事故，并且需要及其采取行动及时处理时，通过声音显示的方式向相关人员传递告警信息的装置工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类（二）基于声音特性的分类•1、语音听觉显示器•2、非语音听觉显示器工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类（二）基于声音特性的分类•1、语音听觉显示器语音听觉显示器是通过显示传递人类语音信号的方式向相关人员传递信息的显示装置工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类（二）基于声音特性的分类•1、语音听觉显示器2、非语音听觉显示器非语音听觉显示器是通过显示传递自然声、乐声等非语音信号的方式向相关人员传递信息的显示装置工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类（二）基于声音特性的分类（三）基于显示设备的分类•1、固定的听觉显示器•2、基于头部的听觉显示器工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类（二）基于声音特性的分类（三）基于显示设备的分类•1、固定的听觉显示器固定的听觉显示器安置位置相对固定，可以同时向多个对象传递声音信号，但其传递的声音信号易受环境噪声因素的影响此时的音场是固定的，是一种外部参照系工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类（一）基于功能特异性的分类（二）基于声音特性的分类（三）基于显示设备的分类•1、固定的听觉显示器2、基于头部的听觉显示器基于头部的听觉显示器位置固定于头部。它会随使用者头部移动而移动，其音场也是移动的此时的音场是一种内部参照系工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点（一）迫听性（二）全方位性（三）变化敏感性（四）绕射性与穿透性工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点（一）迫听性视觉通道可以受别的控制而关闭，而听觉通道在正常情况下是难以被主动关闭的无论个体愿意与否，声音信号总会传入耳内当环境中有大的声音时，人们往往都会迅速转向声音发出的方向即使人正处于困倦或睡眠状态也会被一定强度的声音唤醒，非常适用于显示紧急的告警信息工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点（一）迫听性（二）全方位性声音信号在大气中以球面波的方式向各个方向传播，人耳能接收全方位的声音信号而不必转动头部由于声音传播的全方位性及迫听性，也就是听觉信号可以引导用户通过视觉对目标进行精细分析工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点（一）迫听性（二）全方位性（三）变化敏感性由于声音信号是一种时间序列信号，人耳对声音信号随时间的变化特别敏感，时间解析度高变频信号的时间解析度是视觉信号的一个数量级听觉信号的检测快于视觉信号的检测工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点（一）迫听性（二）全方位性（三）变化敏感性（四）绕射性与穿透性声音传播的绕射行（衍射性）、折射性及反射性等使得声音信号可以不受空间阻隔的影响，可以远距离传送听觉信号与视觉、触觉等其他信号共同使用会达到更自然、更高效的人-机交互效果，也可以缓解其他感觉通道的压力工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点三、听觉显示器的必要性及其适用场合（一）听觉显示器的必要性（二）听觉显示器的适用场合工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点三、听觉显示器的必要性及其适用场合（一）听觉显示器的必要性•1、信息过载•2、注意有限•3、空间受限•4、范围受限•5、视觉依赖工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点三、听觉显示器的必要性及其适用场合（一）听觉显示器的必要性•1、信息过载单纯的视觉通道使人的信息感知效率受限，尤其是在负载的多显示器系统中，通常要求用户同时或在短时内处理大量的视觉信息，这往往造成视觉信息过载，导致用户视觉疲劳或遗漏重要的目标信息工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点三、听觉显示器的必要性及其适用场合（一）听觉显示器的必要性•1、信息过载2、注意有限视觉注意的空间特性与时间特性决定了用户很容易遗漏一些重要信息工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点三、听觉显示器的必要性及其适用场合（一）听觉显示器的必要性•1、信息过载2、注意有限3、空间受限视觉显示的效果受制于显示屏的大小，尤其在距离较远时，为保证显示清晰度必须加大字符、加大显示屏幕，而在绝大多数情况下，显示屏的大小是受限的，尤其是在一些手持移动设备上或飞机驾驶舱等空间非常有限的条件下。工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点三、听觉显示器的必要性及其适用场合（一）听觉显示器的必要性•1、信息过载2、注意有限3、空间受限4、范围受限在视觉界面的交互中，用户必须一直在较近距离内注视显示屏幕，否则将无法获取信息或遗漏信息工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点三、听觉显示器的必要性及其适用场合（一）听觉显示器的必要性•1、信息过载2、注意有限3、空间受限4、范围受限5、视觉依赖视觉显示器功能的发挥还依赖于照明水平等环境因素，在夜间、雨雾天气或远距离阻隔等视觉受限条件下难以正常工作工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点三、听觉显示器的必要性及其适用场合（一）听觉显示器的必要性（二）听觉显示器的适用场合视觉超载：复杂系统中，视觉显示信息过多，导致视觉信息负荷过重视觉受限：夜间、雨雾、照明不足等无法使用视觉显示器的场合故障诊断与告警：偶尔、紧急且需要及时处理的告警信息移动作业与广播：对于经常需要移动位置，无法一直注意视觉界面虚拟环境：在虚拟显示系统中构造出非常逼真自然声场效果助残领域：常用于无障碍化或人性化的特殊用户产品工程心理学©浙江理工大学心理学系第一节听觉显示器概述一、听觉显示器的分类二、听觉显示器的特点三、听觉显示器的必要性及其适用场合四、听觉显示器的一般设计原则易识别性：听觉显示器的声音容易被目标对象注意收听到易分辨性：听觉显示器的不同声音信号及其含义容易区分辨别兼容性：声音信号的意义应与人们已经习得或自然的联系相一致可控性：对于听觉显示的声音信号，用户可以选择终止其显示标准化：不同场合听觉显示器所使用的声音信号应尽量统一与标准化工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计要点二、非语音用户界面及其设计要点工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计要点（一）语音用户界面特点（二）语音用户界面评价指标（三）语音用户界面现存问题及发展趋势（四）语音用户界面设计要点工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计要点（一）语音用户界面特点•1、语音用户界面特点•2、语音用户界面应用工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计要点（一）语音用户界面特点•1、语音用户界面特点优点：−自然性：接近于人与人之间的正常交流方式−高效性：语音用户界面中使用者输入的效率较高−直接性：语音用户界面中呈现的语音信号含义明确−灵活性：不受声音编码维度及数量限制缺点：−被动性：用户对声音信号只能被动接收−瞬态性：语音是短暂的，一旦发出，语音信号就消失不再重现−串行性：语言声音的特点决定了语音用户界面的输入与输出是串行的−易干扰性：相较于非语音信号，语音信号较容易受干扰工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计要点（一）语音用户界面特点•1、语音用户界面特点2、语音用户界面应用语音用户界面适用于：−用户在从事其他操作同时使用语音交互−在空间狭小、照明不良等场合中−在动作输入及视觉显示空间受限的情况下−面向盲人、弱视者、手部残疾者等特殊群体工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计要点（一）语音用户界面特点（二）语音用户界面评价指标•1、言语可懂度•2、语言自然度工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计要点（一）语音用户界面特点（二）语音用户界面评价指标•1、言语可懂度语言的可懂度是定量的表示收听者对所传递语音信息的理解程度可懂度的测定：−语音质量的测定：主观测定和清晰度指数−语言可懂度的影响分析：信号本身、环境因素、言语通信者个体因素工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计要点（一）语音用户界面特点（二）语音用户界面评价指标•1、言语可懂度2、语言自然度言语自然度是描述系统输出的言语品质与发话人发音的相似度−系统输出的言语与真人言语的相似程度−系统人-机交互与人-人交互这两个过程的相似程度语言自然度的评价主要是主观评价工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计要点（一）语音用户界面特点（二）语音用户界面评价指标（三）语音用户界面现存问题及发展趋势•1、现存问题•2、发展趋势工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计要点（一）语音用户界面特点（二）语音用户界面评价指标（三）语音用户界面现存问题及发展趋势•1、现存问题口音和方言等言语可变性问题−标准普通话的识别性能相当高，口音的语音或者方言识别率下降自然语言的理解问题−计算机对自然语言的识别困难背景噪声问题：背景噪声与语音的分离输出语音的自然性：合成声音不够自然工程心理学©浙江理工大学心理学系第二节听觉界面设计一、语音用户界面及其设计