基于HMM与Level Building的连续中国手语识别系统研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:betterman_swp
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着时代的发展与进步,科技逐渐应用到了日常生活中,特别是人机交互技术在日常生活中得到了广泛应用。而手语识别技术作为人机交互的一种方式,通过计算机技术将聋哑人的手语连续动作翻译成文字,使得正常人可以理解聋哑人的语言,促进聋哑人与正常人之间的交流。由于连续手语是聋哑人的主要交流方式,研究连续手语识别具有更加重要的社会意义。本文主要从两个方面展开对连续手语识别的研究:第一部分旨在研究如何构建更加有效的手语模型;第二部分旨在研究如何有效地将连续手语语句划分为孤立词序列。本文完成的研究内容和创新点如下:1.使用隐马尔科夫模型来训练手语模型,在此基础上首先,提出加入样本权重的参数训练方法,针对难以区分的样本赋以较大的权重,使得学习到模型能够对该类样本有很好的适应性;其次,引入区分性信息,将手语运动轨迹长度约束加入到隐马尔科夫模型的分类模型中,进一步提高识别性能;最后,使用阈值模型来生成运动连接词模型。2.结合隐马尔科夫模型和逐层构筑动态规划算法来完成连续句子手语的词序列划分和识别。首先,将连续手语句子的词序列划分任务转化为求解最优句子级别的标记匹配概率,使用逐层构筑算法来完成最优标记匹配概率的查找;其次,将基于手语词帧长约束的搜索窗口策略和基于n-gram的搜索路径策略加入到逐层构筑算法中提高整体搜索效率与句子级别识别率;最后,为了降低整个算法的计算复杂度,提出隐马尔科夫模型中似然概率的快速计算方法提高整体算法的运行效率。3.搭建连续中国手语识别系统。本文设计实现了一个以Kinect作为输入设备的在线连续中国手语识别系统,该识别系统在由66类手语词组成的44条连续手语句子库上取得了90%的识别率。
其他文献
期刊
随着集成电路朝着高密度、高速度、高可靠性的方向发展,电路间的数据传输已显得十分重要,由于传统并行接口技术受串扰和时钟同步问题的困扰己不能满足日益增长的高速数据传输要
为了研究图像多媒体的搜索问题,图像检索重排序问题在近几年得到了越来越多的重视。重排序是基于初始搜索结果得到的信息而运用算法对初始列表进行排序重构的一种方法,它的目
软件定义网络(SDN)和信息中心网络(1CN)是未来网络发展的两大方向。通过转发平面和控制平面的分离,SDN网络实现了从传统分布式网络到集中式网络架构的转变。鉴于现有网络越来
新一代无线通信系统逐步朝向超宽带的技术发展,高频宽的目的就是针对日益增加的多媒体网络应用服务而考虑的,这样需求主要的驱动力来自于因特网,不断提升的有线网络带宽,以及许多
MIMO (Multiple-Input Multiple-Out-put)多输入多输出是当今宽带无线移动通信和无线宽带接入系统的关键技术。所有的无线技术都面临信号衰落、多径、不断增加的干扰和有限频
分析温度对干式煤气柜产生的各种影响.着重介绍温度与密封油粘度的关系,气柜钢结构因温度产生线性膨胀或收缩而引起的各种变化等,并提出处理措施.
协作多输入多输出(Multiple-Input Multiple-Output, MIMO)系统具有MIMO技术和协作技术的优点,利用空间分集增益可以有效抑制多径衰落提升系统容量,提高通信信噪比,降低系统
HINOC (High performance Network Over Coax)是利用有线电视同轴电缆的带外信道组建高速和高质量的多业务宽带接入网的一种新型接入技术。该技术完全利用现有有线电视网同轴
无线传感器网络是由大量的传感器节点组成,传感网络节点的数量上达成千上万。传感器节点主要通过无线通信方式组成多跳自组织网络来完成对环境的监视,控制和数据采集等任务。由