基于不同损失函数支持向量回归机的对比研究

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:guoguo1guoguo1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机器学习主要是用来分析处理数据,挖掘数据背后所潜在的相关信息.大数据时代,如何准确快速地挖掘信息背后的关系已成为热点.支持向量机是由Vapnik等人提出的一项用于数据挖掘的新技术,主要用于模式识别、回归分析等方面.支持向量机的优点在于算法具有稀疏性,运算结果只受一部分样本的影响,抗干扰能力强.此外,通过加入正则项,支持向量机还能防止了“过拟合”.本文主要研究内容:(1)由最大间隔法推广所得的ε-支持向量回归机(ε-SVR)与结构风险最小化回归机(t-SVR)两者的内部联系.(2)文中简略介绍了ε-支持向量回归机、最小二乘法支持向量回归机(LSSVR),以及由ε-SVR算法变形出的v-支持向量回归机(v-SVR).此外,改进了v-SVR算法中的损失函数,分别得到了高斯损失支持向量回归机(GSVR)、混合损失支持向量回归机(MSVR),并用实际数据进行以上五种算法的性能评估.本文研究结论:(1)设ε-SVR算法在参数选定C时,所得的最优解为(w*(C),b*,ξ(*),此时若令t=‖w*(C)‖,则可验证(w*(C),b*)是t-SVR算法的一个最优解,两者等价.(2)无论线性还是非线性回归问题,GSVR算法、MSVR算法在参数C相同且v选取较大时,得到的回归函数与LSSVR算法等价,且对训练集的拟合效果都优于v-SVR算法;对于某些样本集,采用ε不敏感损失的ε-SVR算法性能比其他几种算法预测效果更好,且抗干扰能力更强.(3)对于多元非线性的问题,结合文中的两个实际问题,GSVR算法的预测能力较好。
其他文献
Internet的快速发展和电子商务的高速成长,在改变人们生活方式的同时,也创造了新的商业行为和渠道营销模式。一方面Internet的快速发展使得传统渠道已不能适应市场的变化和厂
近年来,随着企业规模不断壮大和企业员工数量的增多,企业职工信息管理在企业中扮演着越来越重要的角色。尤其是大中型规模的企业,针对职工基本信息管理、信息查询、职工出勤
文献典籍是文化信息的直接承载者,古代文化的传承与发展很大程度上离不开文献典籍的流布与传播。作为一部凝聚了华夏三千年文明的史学宏制,《史记》不仅奠定了中华民族文化认
中华民族在漫长的历史长河中创造了光辉灿烂的文化。数千年来,以传统经济为基础,以专制主义为纽带的古代藏书楼是中国古代图书馆的主要存在形式。中国的藏书历史源远流长,可
阎连科的土地书写在当代文学中自具一格,其作品中内蕴丰富的土地世界诠释了他所信奉的“仰仗土地文化”的意义,人与土地之间的关系演变显示出作家对土地书写持续探索过程中的
有机磷杀虫剂在害虫的防治中多年来一直被作为一种有效的化学农药来使用。随着杀虫剂的大量使用,大部分害虫对这些杀虫剂产生了不同程度的抗性,导致杀虫剂剂量不断加大、防治
孟懿子问孝,孔子答以"无违",那么"无违"所针对的,从逻辑上看只能是父母,因而所谓"无违乎礼"、"不背于理"两说不能成立。"每事须从,无所违逆"的愚孝解读与孔子的一贯主张相抵
丙酮酸肌酸(creatine pyruvate, CrPyr)是一种新的功能营养素,其对丙酮酸和肌酸的生物学功能进行了有效的结合和互补。丙酮酸肌酸的主要功能是抑制肌肉中蛋白质的流失、增加
TB6钛合金具有比强度高、可锻性优异、断裂韧性好、各向异性小和抗应力腐蚀能力强等优点,是迄今为止应用最为广泛的一种高强韧近β钛合金。但是TB6钛合金具有非常高的缺口敏