基于移动终端的中国手语合成系统

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:nanshixujie
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
中国手语合成系统旨在为聋人教育,聋健间的无障碍交流创造环境与基础,它利用人工智能,计算机图形学等技术,实现用三维虚拟角色演示用户指定的中国手语。系统的成功研发,为聋人创造无障碍环境发挥起到了重要作用,对推广规范的中国手语有重大作用,获得了来自残联、教育部、聋协的各界专家的高度评价。系统适用于各种服务行业和公共场所,可给聋人朋友的学习和生活带来极大便利,应用前景广阔。  在追求人机和谐的今天,基于三维虚拟人合成技术的中国手语合成系统有助于聋人群体使用电视、网络、电话、计算机、电影等高科技产品,提高他们的生活质量;有助于手语的标准化,扩大标准手语的使用范围,从而扩大聋人群体的社会交流;有助于改善聋人受教育的环境,通过合成系统可以向聋哑人提供一种无障碍的自主学习方式,为他们增加受教育的机会,提高他们参与社会竞争的能力。通过可视化的虚拟人手语动作及相关文字信息的结合,提高广大听力语言残疾人的教育水平和生活质量,直接影响2800万听力语言残疾人平等交流和获取信息的权益,也关系着我国聋哑人教育质量的进一步提高。  本文的主要研究内容如下:  虚拟人建模:分析人体模型的几何表示方法、人体结构及人体上肢运动特征。针对两个系统的不同特性,选择了基于VRML97标准中的H-Anim模型模型规范,建立了基于层次结构的虚拟人模型。  手语运动数据采集及静态编辑:本文分别采用5DT DataGlove以及EVaRT进行运动数据采集,数据内容主要包含手部和手臂两部分运动数据,并针对虚拟人使用的数据类型做相应格式的转换。由于运动设备采集的数据存在数据冗余、动作偏差等问题,需要对手语词的各个关键帧进行修正编辑。  手语词优化及手语合成:本文提出了手语词关键帧的优化策略,并对词库中的手语词做减帧处理。同时针对不同自由度的关节采用不同的插值算法,在两个关键帧间计算获取若干等时间间隔的帧序列,将获得的帧序列的数据赋值给虚拟人进行手语运动合成,还原手语动作。  分布式结构及中文分词功能:本文实现了基于C/S结构的分布式客户端,充分利用移动互联网的资源,弥补客户端存储能力不足的缺点,同时适用于目前移动终端APP发展的特性。系统中提供了简单的分词功能模块供手语合成时使用。分词模块采用简单的最大正向匹配算法实现分词,采用北大人民日报语料库。
其他文献
智能交通系统(ITS)是智能视频监控系统在现代交通领域的重要应用,代表着未来交通管理的发展趋势。基于视频的车辆检测与定位技术作为ITS的关键技术,处于ITS的底层,是整个系统
随着DT(Data Technology)时代的到来,数据的价值在各行各业中越来越得到广泛重视。如何从纷繁复杂的数据中发掘去一些有价值的信息来指导和改善我们的工作和生活具有重要的意
随着互联网的高速发展,网络信息成爆炸式增长。如何快速、准确的从这些海量数据中获得有用的信息成为了人们关注的焦点。目前通用搜索引擎在搜索人物上的表现已经远远无法满
图像分割是由图像处理到图像分析的关键步骤,在实际中有着广泛的应用。将数学形态学的思想用于图像分割是近年来图像处理研究的热点之一。目前基于数学形态学图像分割方法的研
知识获取是知识工程中关键的一环,而从文本知识源中获取专业知识是一种重要而常用的途径。但从文本中获取知识并不简单,不管是手工获取还是机器获取,领域专家所使用的概念都
随着互联网的普及,计算机在各个领域的普遍应用给人们的工作和生活带来了很大的方便,人们在享用信息社会方便高效的同时,也面临着各种各样的安全风险。黑客的攻击,病毒和木马
随着网络技术、计算机技术和通信技术的迅速发展,医疗数字化渐成趋势,PACS(Picture Archiving and Communication Systems)医学图像的存档和通讯系统也逐步普及。由于PACS需
从海量生物数据中挖掘出反映疾病发生发展变化的重要信息,尤其是恶性肿瘤发生的关键特征,是生物信息学及其应用研究的一个热点问题。在生命机体中,分子间彼此相互关联、相互作用
计算机网络技术和流媒体技术的快速发展,尤其是3G移动通信技术和H.264数字视频编码标准不断的完善和普及,使得视频技术已被广泛用于人们日常生活中。但由于视频内容易复制、易
尽管二维掌纹识别技术的发展已经比较成熟,但是传统的二维识别算法主要利用手掌的灰度信息,无法完全避免光照强度变化、拍摄角度倾斜等因素带来的干扰。因此,人们开始关注使