局部泛化误差模型的改进及其在特征选择中的应用

来源 :河北大学 | 被引量 : 0次 | 上传用户:YouZiTou
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
网络的泛化误差是描述网络能否对未知样例进行正确分类的一个指标。网络敏感性是度量网络输入及其参数的扰动对网络输出产生影响的指标。这两个指标在指导网络设计、增强网络鲁棒性、度量网络性能等方面都有重要的作用。因此,结合神经网络敏感性和泛化误差进行研究是神经网络研究的热点之一。   本文首先介绍了Wing W.Y. Ng的局部泛化误差模型(L—GEM),并指出了Wing W.Y.Ng在L—GEM的理论推导中及Wing W.Y. Ng将该模型应用到特征选择时的不足之处。本文利用基于范数的思想,重新推导了该模型(NL—GEM),并结合实际应用的需要,进一步简化了该模型(L—GEM—WA)。我们也将该模型应用到了特征选择当中。在此基础上我们提出了一种三阶段法来处理日益严重的“维数爆炸”的问题。实验表明,在尽可能不降低网络的测试精度的前提下,本文提出的L—GEM—WA模型及处理高维问题的三阶段法在特征选择中的应用非常实用有效。
其他文献
粒子群优化算法是智能优化算法的典型代表,它的特点是简单、收敛速度快,所需领域知识少,且可用于求解大部分的优化问题,并在经济与工程实践中表现出巨大潜力,所以已被广泛应用于神
双线性系统是最简单且最接近线性系统的一类非线性系统,许多实际领域(如经济、生物、生态、化工与人口等)的建模都可以归结为或近似认为是一个双线性系统。近几十年,对于正常
电视新闻采摄手段(ENG)的运用使电视新闻的发展有了很大的突破,使电视新闻形成了人格化的传播优势。ENG一大特点是摄录同步,把电视记者在新闻事件现场的采访报道,直接声形并
清华大学党委设立了本科生党支部特色活动基金,支持本科生党支部开展有特色的组织生活,提高了基层党支部组织生活的质量。 Party committees of Tsinghua University set up
H-矩阵作为矩阵理论中十分重要的一部分,其应用相当广泛。近年来,H-矩阵被推广到高阶张量上即H-张量。H-张量在科学计算中的多项式优化领域发挥了重要的作用。同时在工程应用领
反问题的一个特别重要的属性就是它通常是“不适定”的数学问题,使得它无论在进行理论分析还是在进行数值计算时都有特定的困难.其算子形式为:Au=f(1)求解这类问题的普遍方法是
融合算子在信息融合中发挥着重要作用,不同的信息融合需要不同的融合算子,不同的融合算子一般产生不同的融合效果。目前,已有许多融合算子,如取大算子、取小算子、均值算子、
本文以“意识流”的表现手法分析动画设计中的虚幻与想象,以表达人物内心深处的情感为目的展开研究,详细分析了“近似性剪接”实现画面转场、叙事空间营造、蒙太奇叙事四种具
《炎黄春秋》杂志2008年第1期发表了《胡适与陈独秀关于帝国主义的争论》(以下简称《争论》)一文,该文美化帝国主义对中国的侵略,丑化社会主义的苏联,否定中国共产党领导中国
基于相机畸变校正的视觉测量方法,具有非接触式、高精度、高智能等优点,使得这项技术在工业生产和机械加工中的轴径测量方面有着广阔的应用前景。由此,本文对基于机器视觉的