增强可懂性的中国手语多模式行为合成研究

来源 :北京工业大学 | 被引量 : 0次 | 上传用户:love_day
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
手语是聋哑人使用的语言,由手形动作辅之以表情姿势而构成的比较稳定的表达系统,是一种靠动作、视觉进行交流的特殊语言。中国有上千万聋哑人,而手语作为聋哑人的第一自然语言运用非常广泛,因此,通过计算机手段对中国手语进行动画合成表达,不但有助于改善和提高聋哑人的生活学习和工作条件,为他们提供更好的服务,同时也可以应用于计算机辅助手语教学、电视节目双语播放、虚拟人的研究、医疗研究、游戏娱乐等诸多方面。另外,手语合成技术研究涉及到计算机图形学、虚拟现实、数学建模、自然语言分析等多个领域,这种跨领域性和学科的交叉性使手语合成技术研究具有了非常重要的意义。 本论文将结合目前的国内外相关研究,对中国手语的合成中的虚拟人仿真技术、表情动画、肢体语言,以及韵律分析等方面进行深入探索。本文首先介绍了虚拟人建模技术、定义建立的虚拟人模型、说明了VRML虚拟人建模国际标准,然后重点讲述了运动捕获设备和关节动画技术的结合在系统中的应用。考虑到表情、肢体动作和韵律都对手语交流中的含义传递有极大的影响,本文将表情动画技术、肢体语言中的头部运动合成,以及手语韵律建模列为三个关键技术进行研究,我们称之为“手语表达中多模式行为合成”。 本文的贡献在于: 1)阐述了中国手语合成系统的各项虚拟人仿真技术:虚拟人建模技术、运动捕获技术、动画驱动技术。 2)阐明表情在手语表达中的重要地位,对传统表情动画技术进行了归纳总结,然后结合MPEG-4面部动画标准,提出了中国手语合成系统中表情动画技术的研究方法。 3)针对手语交流中的头部运动进行规律分析和合成研究。 4)论证了手语韵律对于手语句子含义表达的重要性,并从真实手语视频中采集运动信息,对手语表达进行了韵律参数研究,提出了基于统计的中国手语韵律模型。
其他文献
市场经济的发展使企业的经营环境发生了巨大的变化,产生于上世纪九十年代的ERP(Emerprise Resource Planning企业资源规划)系统建立在信息技术的基础上,以系统化的管理思想为企
在移动机器人控制与导航过程中,为了保证移动机器人控制方法和运动策略的安全实施,必须对自主移动机器人的内外部状态进行异常检测。本文着重在对几种常见的异常进行检测与识别
解决平台间的异构性、提升计算平台的抽象性,推动着软件技术和软件工程的发展。中间件技术屏蔽了底层分布式计算的复杂性和异构性,简化了分布式应用程序的开发,是对计算平台的一
基于计算机和网络的教学管理,可有效监控教学质量,提高教学管理水平,相关系统的开发设计已引起人们的关注,本课题就是基于J2EE技术,开发设计扬州税务进修学院的教学评估系统。
纸笔的工作方式,是人们早已熟悉的方式。人们通过纸笔捕捉和交流信息、记录思想是一个非常自然的活动。但是也存在一些缺点,如:信息难以修改、维护、检索等。这将导致用户某种程
人脸表情识别技术是生物特征识别、情感计算、心理学、机器视觉等领域的一个极富挑战性的交叉课题,是近年来的一个研究热点。尽管人脸表情自动识别技术在各种潜在应用的推动下
信息系统是现代企业管理系统的重要组成部分,建立合理的信息系统成为当务之急。体系结构决定了一个系统的主体结构、宏观特性和具有的基本功能及其特性,因此信息系统体系结构是
人脸检测作为人脸信息处理中的一项关键技术,近年来成为模式识别与计算机视觉领域内一项受到普遍重视、研究十分活跃的课题。本文首先提出了人脸检测的一个新的应用领域——电
移动自组网是由一系列带有无线收发装置的动态节点所形成的一个多跳临时性自治系统。作为一个的不需要固定基础设施特殊的无线网络,它在民用和军事通信领域占据一席之地提供了
目前基于SOA架构开发的项目越来越多,在这种架构模式下需要应用的一项技术就是Web服务,大量Web服务的出现对服务的发现提出了挑战。传统的基于关键字的服务发现机制已经不能