面向视觉交互的表情分析研究

来源 :南京大学 | 被引量 : 0次 | 上传用户:Thomas1007
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机信息处理能力的增强和表现形式的多样化,人机交互界面正逐渐由单一的图形用户界面GUI朝着具有高交互性和多模态性的感知用户界面(PUIs)发展。视觉通道承载了大量的交互信息,单独使用或是与其他感知模态相结合,均能向人机交互提供重要的线索,因此基于视觉的交互技术VBIs是感知用户界面技术的重要子领域,具有广泛的应用价值。面部表情传达了人际交往中的大部分信息,而且这些信息几乎都是不可由其它信息表达方式所替代的,因此表情分析作为视觉交互的一个关键线索,成为视觉交互的主要研究课题之一,并且表情分析在各种视觉系统中都有重要的应用,如心理学研究的辅助工具、视频会议、人脸合成、情感计算、智能人机接口等。   本文主要研究了面向视觉交互的表情分析技术,针对视觉交互的高实时性和强鲁棒性要求,提出了一个基于几何特征的表情分析方案,研究了人脸检测、面部特征点自动定位,特征点跟踪和表情分类等各个关键环节,论文的主要成果体现在以下三个方面:   第一、研究了面部特征点定位技术,根据视觉交互对实时性的要求,本文选用几何特征作为表情分类的特征。为了能够自动提取几何特征点,采用主动形状模型(ASM)进行特征点提取,但是传统的ASM方法依赖于初始化的情况、局部灰度模型的建立以及搜索策略的选择。本文针对人脸表情图像中表情变化的特点,提出了改进ASM的方法,有效提高了面部特征点定位的精度。   第二、研究了面部几何特征点跟踪技术。分析了KLT特征点跟踪算法和基于ASM模型的特征点跟踪算法的优缺点,将KLT特征点跟踪算法与人脸特征点定位的ASM方法结合起来,提出了视频中人脸特征点跟踪的一种混合模型.该模型使用KLT算法预测人脸特征点的位置,充分利用了帧间的相关信息,提高了跟踪的速度.通过ASM纹理和形状的约束,在提高跟踪精度的同时增强了整个算法的鲁棒性,最后通过实验验证了本方法的有效性。   第三、提出了基于LSVM的表情分类方法。为了提高基于视频序列的表情识别精度,本文在KNN-SVM算法的基础上提出局部SⅧ(LSVM)分类机制并将其用于视频序列中的表情分类,对于一个待分类的几何特征样本,首先在训练集中寻找该样本的k个近邻样本,然后使用这k个近邻样本训练集成了近邻信息的SⅧ分类器进行表情分类,在Cohn-Kanade数据库中的对比实验表明该分类器有效提高了表情分类的精度。  
其他文献
随着互联网的不断发展,出现了大量的P2P网络应用,为互联网用户的提供了非常大的便利,得到了人们的广泛认同。MazeP2P文件共享系统便是其中的一个。它为中国教育网中数十万的用户
由Mandelbrot创建的分形理论现在被广泛地应用于各种领域。利用分形可以解释自然界中不稳定的、非线性的、不规则的复杂现象的内在规律,可以研究无标度特性的物体和集合的自相
近年来互联网金融产业蓬勃发展,伴随而来的是规模巨大的互联网金融数据,这些数据蕴含着巨大的价值,有行业热点追踪预测、行业监管等重要应用。在对互联网金融数据进行数据挖掘、
党的十八大作出“建设海洋强国”的重大部署,“走向海洋”被提升到国家战略高度。随着定位设备准确性的提高,以及通信设备覆盖面及传输量的扩展,不论是企业、政府还是国防单位,都
With emergence of Service Oriented Architecture (SOA) as the main technology forenterprise application development and integration, there is a need of servicede
现实世界是一个变化的世界.不同的时间下,世界呈现不同的状态.在任何领域,变化是一个永恒的主题。如何在计算机中表示动态变化的过程是一个复杂并且值得深入研究的问题.本文主
近年来随着数据挖掘的研究及其应用的逐步深入,分类已成为数据挖掘一个重要的研究方向。分类作为一项具有较大的实用价值的关键技术,在公共管理,金融,商业和科学研究等领域获得了
本学位论文对汉字的结构与部件拆分作了研究,并对如何从数字图片中提取书法汉字的部件及其基本特征和部件间相互关系进行了初步算法性探索。做上述工作是原于以下的想法:1)书法
随着无线通信技术的发展、移动终端设备的高速增长和信息访问需求的日益增加,移动电子商务具有远大的市场前景。移动电子商务能够超越时间和空间的限制,使人们通过移动通信设备
学位
编译器是软件产业中重要的工具,对它的质量保证非常重要。编译优化是编译器的重要功能,它的质量对于编译器质量有重大影响。   可采用软件测试的方法进行编译器优化模块的质