支持向量机超参数调节方法的研究及其在人脸识别中的应用

来源 :重庆大学 | 被引量 : 0次 | 上传用户:kaless
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
支持向量机(Support Vector Machine, SVM)是模式识别领域广泛使用的强有力的分类工具。SVM的特点主要是通过引入核函数将原始空间中的训练数据转换到相应的Hilbert特征空间,使输入空间线性不可分的问题变成普通的线性可分的问题,其中核函数(包括核参数)起着非常重要的作用。核函数(包括核参数)的不同意味着获得的Hilbert特征空间不同,SVM超参数(包括核参数和惩罚参数)的选择直接影响着SVM的泛化性能,因此而得到的最优分类面及分类结果也不同。但是SVM超参数选择由于缺乏有效的理论分析,致使该问题成为模式识别、机器学习领域长期存在的难题。SVM作为分类工具已成功应用于人脸识别,但目前人脸识别研究普遍受到不同姿态、光照等环境变化因素的制约。研究表明,具有最佳超参数的SVM模型可以在一定程度上抑制人脸因环境变化带来的影响。而SVM最佳超参数选择在实际问题中的应用所遭遇的主要困难是SVM超参数选择的效率问题。尤其在解决诸如人脸识别这类具有稀疏、超高维特征的分类问题时就显得更加突出。为此,本文对SVM超参数调节方法进行了研究,提出了适用于人脸识别的SVM超参数优化算法,得到了较好的实验结果。本文的主要工作是基于均匀设计(Uniform Design, UD)的基本原理,提出用于解决人脸识别问题的SVM超参数调节方法。该方法的核心是用UD代替传统的网格(Grid)和梯度下降(Gradient Descent)方法,挑选充分均衡分散在整个试验范围内且能得到满意实验结果的特征点,通过最小化k折交叉验证误差界或留一法(Leave One Out, LOO)误差界获取SVM最佳超参数。本文在研究中发现,虽然基于UD的SVM超参数调节能有效地降低计算复杂度,但由于该方法采用单目标作为评价标准,在解决人脸识别这一实际问题时,SVM的泛化性能还有待改善。因此,本文进一步提出了多目标均匀设计(Multi-Objective Uniform Design, MOUD)优化算法。MOUD方法以灵敏度和精确度作为多目标优化算法的目标函数,并以此代替传统的单目标作为SVM超参数调节的评价标准,该方法结合UD方法搜索整个试验范围内均匀散布的试验点,这样不仅能有效地降低计算复杂度,还能在一定程度上保证SVM的泛化能力。本文在UCI模拟数据集和人脸图像库上进行了验证实验。结果表明:本文提出的MOUD方法与传统的SVM超参数调节方法相比,能大大降低超参数调节的时间且能在一定程度上提高人脸分类识别率。这使SVM超参数调节方法在解决高维人脸真实数据问题时具有一定的实用价值。
其他文献
本文概要地说明了近几年来世界航空公司在发动机维护方面发展的历程,指出了对发动机进行定期维护的弊病,分析了航空发动机视情维护的重要性。进一步阐述了在视情维护的基础上发
温度是许多行业的重要环境指标之一,不论是农业、工业,还是人们的日常生活,都需要把环境温度控制在适当的范围之内。在粮仓、桥梁、冷库等应用场合,温度监测显得尤为重要。本课题
社会化式生产的快速发展和人们物质生活水平的提升,对电力供应提出了更高的质量要求,只有全面提高电力资源利用效率,才能保证供需平衡,实现安全供电用电效果,输电线路带电作
在分析网络环境下装配 CAPP(Computer Aided Process Planning,计算机辅助工艺设计)的功能需求基础上,建立了支撑层、服务层和应用层三层结构的CAPP 系统框架。在此框架的基
惯性导航系统以其无源性及自主性的特性,为水下航行器实现自主隐蔽航行创造了条件,因此一直是水下航行器导航系统的核心设备。但其位置误差是随时间积累的,因此单独惯性导航
本文通过对荣华二采区10
期刊
目的基于主题建模和情感分析的方法,在患者医疗服务投诉文本中挖掘有价值的主题信息和情感分布,调查影响患者服务体验和满意度的主要驱动因素。方法对某三级甲等医院2013年至2017年线下患者的8 000条投诉文本集进行主题挖掘,利用从1 000条抽样文本提取出的种子词集来引导文本进行半监督的LDA模型训练,提炼相关主题类并对主题特征进行情感评分。结果从投诉文本中最终提取出30个主题类,主题特征情感评分与
对拥有丰富生态旅游资源的地区来说,如何将旅游资源优势转化为资产优势,将高品位的资源性资产作为开发生态旅游的资本,加快生态旅游业发展,实现经济、生态、社会效益的统一协
本文系统的总结概括了统计能量分析的发展简史和研究现状,并放眼于统计能量分析在动力学分析及声振预测方面的应用前景,对一般结构的模态密度、内损耗因子的定义和计算方法
采用摆振柔软旋翼的直升机在某些状态下容易发生“地面共振”和“空中共振”,为了保证直升机的安全,需要在旋翼桨叶根部和机体起落架上安装阻尼器。摆振刚硬旋翼的一阶摆振固有频率大于1/rev,使直升机有效地避免了以上风险,但同时也会带来低阶交变载荷过大的问题。为降低摆振刚硬旋翼摆振方向的低阶载荷,本文通过在旋翼桨叶尖部嵌入液弹吸振器,利用Lagrange方程建立了旋翼桨叶/液弹吸振器的耦合动力学模型,研究