双平面支持向量机的模型与算法研究

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:ogl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
双平面支持向量机(Twin Support Vector Machines, TSVM)是一种非平行平面最接近支持向量机算法。它的目标是寻找两个非平行的超平面,一个超平面离一类样本点很近,离另一类样本点有一定的距离。它求解一对相对小规模的二次优化问题,工作速度比支持向量机(Support Vector Machines, SVM)快约四倍,它的性能也常常比SVM好。TSVM在最近几年的发展非常迅速,成功地应用在模式识别、数据分类和函数拟合等领域。SVM的多任务学习,多视角学习和半监督学习已经吸引了大量的研究人员进行研究。本文将TSVM扩展到了多任务学习,多视角监督学习、多视角半监督学习和半监督学习的框架下,并且用PAC贝叶斯理论分析了双平面支持向量机的泛化误差界。在多任务学习框架中,我们首先提出了直接多任务双平面支持向量机(Direct Multitask Twin Support Vector Machines, DMTSVM),这种方法类似于多任务支持向量机思想,任务间分类器共享一个共同的表示,每个任务会有一个偏置。同时为了消除双平面支持向量机对于野值点敏感性的缺陷,我们提出了通过加权类中心到超平面距离的质心双平面支持向量机(Centroid Twin Support Vector Machines, CTSVM),然后将CTSVM按照相同的方式扩展到多任务学习框架下得到了我们的多任务质心双平面支持向量机(Multitask Centroid Twin Support Vector Machines, MCTSVM)。在多视角学习框架中,我们提出了多视角双平面支持向量机(Multi-view Twin Support Vector Machines, MvTSVM)对应于多视角监督学习,以及多视角拉普拉斯双平面支持向量机(Multi-view Laplacian Twin Support Vector Machines, MvLapTSVM)对应于多视角半监督学习。这两种方法都通过多视角约束的思想结合了两个视角,类似于SVM-2K。MvLapTSVM在MvTSVM的基础上,借鉴拉普拉斯双平面支持向量机(Laplacian Twin Support Vector Machines, LapTSVM)额外增加了平方损失和Laplacian规范化项。在半监督学习框架中,我们使用了新规范化项,叫做切空间内蕴流形规范化(Tangent Space Intrinsic Manifold Regularization, TSIMR)。该规范化项不仅能够利用标签数据和未标签数据来捕获流形的局部信息,而且还包括了经典的Laplacian规范化项,我们将它和TSVM结合进行半监督学习,提出了切空间内蕴流形规范化双平面支持向量机(Tangent Space Intrinsic Manifold Regularization Twin Support Vector Machines, TiTSVM)。SVM被广泛应用的一个重要原因在于它有强大的统计学习理论做支撑,而双平面支持向量机的理论分析极少。PAC贝叶斯界和先验PAC贝叶斯界基于分类器分布的先验和后验是实际应用中最新最紧的界。本文最后使用统计学习理论中的PAC贝叶斯理论分析了双平面支持向量机的理论界。为了评价本文提出的方法,我们在多个现实数据集上进行了对比实验。实验的结果验证了本文提出算法的有效性。
其他文献
1.临床资料患者,男,34岁,农民,因“反复头晕、头痛、上肢麻木、乏力1^+年”入院。患病期间伴随有夜尿增多,活动后心悸、气促,休息后缓解。外院测血压180/100mmHg(1mmHg=0.133kPa),血钾3.32
会计核算的初衷即为了体现公司价值。在不断地记录方法和扩展中,越来越接近公司的真实价值。
处在当前社会经济发展时期,加强农村的水利工程建设对农村经济的发展有着积极促进作用,工程建设中要在质量管理方面充分重视。基于此,本文先就农村小型水利工程的施工特征以
企业责任是个非常复杂的概念,可以做一种道德解读,在道德上要求企业承担社会责任,也可以有一些制度的安排。这个议题很有意义,关键是在这个议题之下能够做什么。因为企业公民首先
随着农业耕作技术的发展,人工喷洒农药的方式逐渐消失,出现无人喷洒作业。本文介绍了农用植保无人机机型及动力,阐述了农用植保无人机的动力系统应用现状,以期为我国农业发展
针对于计算机教学,学生接受学习过程中,为实现良好积极性,教学质量不断提升,应力求注重教学改革,教学方法不断创新。通过任务驱动作用,注重加强任务驱动教学,在一定程度上非常有助于
[目的]探讨动机性访谈式糖尿病教育对糖尿病病人相关心理痛苦的影响。[方法]采用动机性访谈的教育方法,对64例2型糖尿病住院病人进行干预,评估干预前后病人心理痛苦水平。[结
小型水利工程的建设是我国经济发展中的一个重要环节,是人们进行生产生活活动的基础,是农业生产的主命脉,与人们的生活息息相关。并且小型水利工程的质量能够关系到企业单位
1项目背景改革开放30多年以来,我国经济高速发展,取得了巨大成就,但由于能源利用效率总体较低,我国也面临着资源匮乏、环境污染等巨大压力。因此,党中央、国务院强调科学发展
博物馆不仅仅是教化场所,还是娱乐、休闲和自主学习的地方,博物馆要想更好的为社会服务就必须要根据自身的行业特点,引入质量管理体系,注重系统化的规范操作,探索出适合中国