基于智慧家庭Smart Home可配置资源的多模态人机交互的研究与实现

来源 :东北大学 | 被引量 : 1次 | 上传用户:jiayin228699
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机及其相关技术的发展和人们生活水平的不断提高,人们对计算机的要求不再是网上冲浪、办公、娱乐等,而是希望它能用于家庭生活的方方面面,例如:家电控制、室内环境控制等,因而家庭生活的智能化成为了家庭生活发展的必然趋势。目前,图形化界面人机交互方式是应用于人与计算机交互的主要方式,虽然这种方式已经达到对设备的有效控制,但是人们的感受作为评价交互方式优劣的重要因素没有考虑在内,对操作人员的素质要求也比较高,尤其是残障人士根本无法使用该系统,致使用户与计算机的交互过程中存在很大的局限。基于这些原因,本文提出了一种更适合用户与系统交互的方式,即多模态人机交互方式。针对智慧家庭系统,设计并实现了多模态的人机交互模块和智慧家庭系统的资源配置模块,其贡献点可以概括如下:(1)在配置界面显示上采用了XML技术,并扩展了XML和:XML Schema的传统用途,即在XML中增添界面显示元素,通过XML转换器把XML转换成界面元素,用于界面显示;通过:XML Schema转换器把XML Schema转换成XML元素模板,再通过XML转换器把XML元素模板转换成半界面元素。XML与XML Schema新的用途适用于智慧家庭资源配置,增加了界面显示的灵活性。(2)设计了具有扩展能力的人机交互输入接口,并对其进行了多种实现,如:语音输入实现、电话语音输入实现、MSN输入实现、Gtalk输入实现、Skype输入实现和Google日历输入实现。人机交互输入接口方便了输入方式的扩展,流行IM输入和日历输入实现充分考虑用户的行为习惯,方便用户对计算机的控制。(3)设计了具有扩展能力的人机交互输出接口,并对其进行了多种实现,如:文字转换语音输出实现、命令控制输出实现和视频输出实现。人机交互输出接口方便了输出方式的扩展。(4)设计实现了智慧家庭的配置模块,主要包括系统信息资源、家庭用户资源、硬件资源的配置和软件资源的配置,硬件资源包括:房间、设备的配置;软件资源包括:浏览器、鼠标、新闻播报和控制设备指令的配置。配置模块为资源变更提供了较强的伸缩空间,方便了用户对家中资源的管理。
其他文献
联机分析处理(OLAP)是一个重要的数据库系统的应用。通常OLAP数据呈现为多维数据立方体。OLAP的查询一般是复杂的,并且如果在原始数据上执行,可能要花费几个小时甚至是几天时间
许多机构和社团(如现代化企业、股票公司、广告公司、Web服务中心等)在每天的日常工作中经常制作和收集大量的数据,从大量存储在网络服务器的访问日志中原始的半结构化数据中挖
金融机构的特殊性质决定了其对数据安全的要求极为严格。但随着Internet和电子商务的迅速发展,以完全封闭性的业务来赢得安全已经不能满足需求,与外界互联并发展网上业务势在必
以工作站机群为代表的网络计算环境是当前并行计算和分布式系统的研究重点之一,解决异构性问题和动态负载平衡是使用机群进行网络并行计算的关键.该文介绍如何使用改进后的遗
该文根据仿真计算与可视化相分离的观点和虚拟现实技术在仿真可视化方面表现出来的优越性,剖析了VRML语言在仿真可视化方面的优点和不足,提出了一系列基于VRML的仿真可视化平
随着电子商务的发展,企业信息处理的数据量越来越大,企业信息门户(EIP)的概念应运而生,它不仅为企业用户提供了统一的应用界面,而且把整个企业所需的数据和应用(包括企业的ERP系
随着电子技术和生产制作工艺的迅速发展,单片机以其高可靠性、高性能价格比,在工业测控系统等领域的应用日益广泛。同时,为了适应现代工业测控系统越来越高的要求,单片机的复杂程
为了克服传统的基于文字检索存在的主观性、低效率等缺点,人们开始强调基于内容的检索技术。考虑到图像信息对于信息获取的重要意义,本文主要研究了基于内容的图像存储(图像数
随着Web2.0的迅速发展,用户越来越多地参与到互联网的信息交互中,形成了以标签为代表的社会化标记等广泛应用。尽管围绕着标签应用进行的研究日益增多,标签应用的性能提升却
重载和轻栽是目前软件开发过程中的两大阵营。重栽类过程强调规范化、量化、固化,即管理手段规范化、质量管理要量化、软件文档生成固定化。因此重载类过程往往要求企业有大量