核学习的不定性与深度化方法研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:zippomu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
核学习方法是一类通过引入核函数,隐式地将输入空间映射到高维特征空间,将线性学习器拓展为非线性学习器的学习方法。核方法目前已在分类、回归、聚类等诸多领域得到运用,典型的核学习方法包括支持向量机、核主成分分析、核线性判别分析,核化K均值聚类等。通常而言,核方法要求使用的核函数满足Mercer条件,这样的核函数对应的核矩阵是半正定的,称为正定核,其隐式地定义了一个再生核希尔伯特空间作为特征空间。然而,在实际应用中有许多核满足实对称条件但不正定,这样的核称为不定核。不定核的研究有其必要性,目前已有一些不定核在某些任务上达到了更高的性能;在某些情况下半正定核将退化到不定核;对于一个给定的核,鉴别其Mercer条件可能具有很大的困难。因此,核学习的不定性研究拥有较高的学术和应用价值。然而,尽管不定核学习在一定程度上增加了核学习方法的灵活性和丰富程度,但在应对任务复杂、数据量大的情况时往往仍由于其“浅”结构导致灵活性不足从而达不到满意的性能要求。近年来,学者们逐渐认识到,从“深度”拓展模型往往能取到比拓展“宽度”更好的效果。因此,研究如何构建核学习方法的深度模型,对于进一步加强核方法的灵活性和表示能力有着重要意义。本文从提高核学习方法的灵活性和表示能力出发,对不定核学习和深度核学习方法展开了研究。本文的主要研究内容如下:1.针对不定核学习中存在的非凸性和无界性问题,本文引入了球面约束建立模型求解,利用Rademacher复杂度进行了泛化误差性能分析,并采用了迭代方法将解进行稀疏化。2.针对不定核学习能力仍不足的问题,本文通过随机傅里叶特征进行核学习深度模型的构造,采用梯度下降来求解问题,并对所提模型建立了复杂度分析。最后本文通过实验验证了相对其他模型,所提模型具有较优的性能。3.在应用上,本文基于核化最大均值差异对图像去噪进行了研究,提出了MMD-DGAN进行图像去噪,在不同数据集上达到了较优的水平。
其他文献
动基座初始对准为运动中的惯性导航系统(INS)提供初值,因此在惯性导航系统中具有重要作用。动基座初始对准技术是近年来的研究热点,本文针对惯性测量单元(IMU)的噪声与对准算法精度对初始对准的影响,研究基于优化方法的GPS辅助动基座初始对准以提高初始对准性能。本文首先分别设计了用于减小系统误差与随机误差的标定方法与小波滤波器,在此基础上提出了两种改进的初始对准算法,从而提高了对准的精度,降低了算法的
随着焊接自动化与智能化水平不断提高,管道全位置自动焊被广泛应用于核电管道建设中,然而管道全位置焊接时由于装配误差、坡口加工精度及焊接热变形等因素影响,管道焊接质量难以保证。核电管道焊接质量要求高,背部焊道成型情况影响焊接接头质量,受制于技术水平及现场施工环境制约,管道内壁焊道成型情况难以直接观测。得益于视觉传感技术及人工智能技术的迅猛发展,本文针对管道焊接背部成型质量难以监测的问题,开展了核电管道
药物研发是关系国计民生,具有重大经济效益和社会效益的科学课题。准确识别药物-靶标相互作用可以显著促进药物研发过程。与花费昂贵、费时费力的实验方法相比,机器学习在有效、高效识别药物-靶标相互作用中起着越来越重要的作用。然而,上游特征提取方法需要大量的知识积累和繁琐的流程,极大地限制了机器学习方法的应用。受word2vec等无监督表示学习方法的启发,我们在此提出了一种新颖的特征提取方法—SPVec,可
财政支农支出是农业发展的重要支持,其占农业总投入比例不断上升,而其占全国财政总支出比例却在波动中下滑,财政支农支出位重而量平。由此,厘清财政支农与农业发展的关系,对确保农业健康发展与粮食增产尤为重要。本文分析了财政支农的历史变迁及其现状,基于农业总产值与粮食总产量双重视角,利用时间序列和面板数据,探究了财政支农对农业的长期影响及其对农业技术效率的影响,同时研究了财政支农各项费用对农业发展的影响。研
本研究以上海市2008-2013年期间6824家文化企业为研究对象,使用随机前沿模型测算了不同规模文化企业的技术效率水平。本文将产业政策分为供给型、需求型、环境型三种不同的类型,并分析了三种不同类型的产业政策对文化企业绩效的直接影响以及通过不同融资渠道对文化企业绩效产生的间接影响。在此基础上,本文进一步研究了产生影响的作用机理。本文分析发现,成熟的文化产业生态呈现橄榄型,中型企业拥有最高的效率也是
密封器件广泛应用于汽车、制造业、航天、医疗、家用电器等领域,随着技术的发展和行业的激烈竞争,产品质量追求可靠、卓越成为企业共识。气密性检测作为密封器件的质量检验,是保障密封器件性能的关键检测手段,越来越受到企业和用户重视。在常用的气密性检测方法中,差压检测法因其结构简单、检测精度高、不易受环境干扰等优势,在工业生产中广泛应用。目前国内生产的气密性测试仪与国外相比,在检测精度和检测效率方面存在一定差
随着互补金属氧化物半导体(CMOS)尺寸缩减物理极限的逼近,超越CMOS(Beyond CMOS)技术被视为CMOS技术在未来的重要补充。新型纳米器件在这个过程中起着至关重要的作用,新型纳米器件包括碳纳米管场效应管(CNT FET)、阻变存储器(RRAM)、隧穿场效应管、自旋电子器件等,它们有着传统CMOS不具备的器件面积小、较小能耗-延迟乘积(EDP)、非易失性、高电子迁移率等优点。但是由于制造
随着人类对生命健康领域的重视,医疗检测逐渐从医院拓展到家庭环境。设备小型化、操作简便化、结果及时化的即时检测(point-of-care testing,POCT)设备由此孕育而生并获得了迅速发展。即时检测设备的操作简单、检测成本低,能够满足许多简单医疗环境下的检测需求。随着科学研究的不断深入,即时检测设备也从定性检测逐渐发展到定量检测。对检测设备的稳定性、灵敏度和检测限等性能指标提出了更高的要求
语序是语法基本的部分。由于汉语缺乏屈折词缀,很多语法意义都要通过语序来表达,所以语序在汉语学习中特别重要。本研究旨在探讨韩国和日本学习者对汉语语序的习得情况。在句子层面,考察汉语二语者对SVO,SOV和OSV三种语序的习得情况。SOV和OSV在汉语中分别为焦点结构和话题结构,前者涉及句法-语义接口知识,后者涉及句法-语篇接口知识。在短语层面,考察汉语二语者对三种附加语(频率副词,介词短语,方式副词
随着产业信息化进程的不断推进,信息安全的重要性与日俱增。身份认证是信息安全领域中的一个重要研究课题。近年来,利用人体生理和行为特征进行身份识别的生物认证技术得到越来越多的发展和应用。击键行为相较于人脸、指纹、虹膜等人体生理特征和声音、文体、步态等人体行为特征,其优势在于:击键数据的采集不需要高成本的硬件设备;击键行为在身份认证应用过程中有着较小的用户干预。然而,目前基于击键行为的认证准确率还有提升