论文部分内容阅读
人机交互中传统的WIMP视觉界面不仅可能使用户的视觉通道过载,而且也会使盲人和有视觉缺陷的用户无法使用。针对上述问题,人们发展了多种新型界面,听觉界面就是其中备受关注的一种。 声音是一种多维度媒体,主要有音调、音色、响度、持续时间和方向等维度特征;声音又是一种多效应媒体,主要有鸡尾酒会效应、流效应和回声、反射等效应特征。这给设计抽象听觉界面带来了很大的灵活性。听觉界面主要分为语音听觉界面和非语音听觉界面两类。语音和非语音相结合的界面近年来成为听觉界面的主流。开发听觉界面主要有两种技术:听标和耳标,耳标在输入上具有容易参数化和层次化、在输出上具有容易理解和记忆等优点,因而日益受到听觉界面开发者的青睐。 目前,听觉界面的开发大多从主观审美角度出发,缺乏系统的指导理论和相对完整的开发平台,影响了听觉界面的交互效率,同时也限制了听觉界面的普及。本研究总结了结构化音乐耳标设计和组织的一般原则,并以这些原则为基础,结合听觉界面设计的一般性原则,详细描述了一个结构相对完整的听觉界面及其各部分的功能,完成了对平台的开发。该平台主要由听觉界面简单交互元素和复杂交互元素两部分组件构成,这些组件具有可扩展性和通用性,且对开发者的专业音乐知识无特殊要求。最后,本研究基于听觉界面开发平台,开发了一个听觉界面应用原型——盲人用户手机。该系统采用语音识别、键盘和鼠标三种交互方式,并实现了方式间的无缝连接,充分体现了多通道的互补作用。系统中的听觉反馈采用了结构化音乐耳标和文本——语音转换(TTS)技术,使交互过程更趋于自然、有效。盲人用户手机也适合在双手被占用等特殊场合下正常人的使用。