深度学习中的去冗余与特征映射方法研究

来源 :西北师范大学 | 被引量 : 0次 | 上传用户:selena2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,以神经网络为基础的深度学习相关理论及方法受到广泛关注。与传统的机器学习方法相比,深度学习的方法具有更加强大的特征学习能力。其中,可逐层提取数据抽象特征的受限玻尔兹曼机(Restricted Boltzmann Machine,RBM)是深度学习的重要模型之一。近年来,RBM在视频、图像、语音、文本领域受到了广泛的研究与应用。在图像特征映射方面,卷积神经网络(Convolutional Neural Network,CNN)以其强大的图像特征学习及分类能力受到了广泛关注。本文主要在深度学习中的一些算法模型的理论与应用方面做了研究。研究了RBM在训练过程中产生的冗余隐单元,提出了一种RBM中冗余隐单元的评价方法,进而提出了一种去冗余的受限玻尔兹曼机模型;本文还研究了聚类卷积模型及卷积神经网络模型,提出了一种基于聚类卷积与RBM的多尺度特征映射方法并将其应用于医学图像分类中。论文的主要研究内容如下:(1)提出了一种去冗余的受限玻尔兹曼机。本文在通过分析RBM的训练过程及其隐单元的数据分布,提出了一种RBM中冗余隐单元的度量方法,从而在RBM的训练过程中加入去冗余机制,通过去除RBM中冗余的隐单元,对RBM进行去冗余的结构优化,极大的减少RBM中隐单元的数量,提高了RBM的训练效率,缩短了训练时间,提高了模型的收敛速度。实验表明,该方法可以在不影响重构误差的条件下,消除量冗余隐单元,对于优化RBM的结构、加快特征学习速度具有重要意义。(2)提出了一种基于聚类卷积与受限玻尔兹曼机的多尺度特征映射方法。本文将RBM与聚类卷积方法相结合,同时采用多尺度的特征映射方法,对聚类学习卷积特征的方法加以改进。新的方法不必进行数据的预处理,同时提高了其产生的卷积核的泛化能力。在高效稳定的基础上,进一步提高了所提取的特征质量。通过在CIFAR-10数据集上的实验,使用映射的特征对图像进行分类,准确率达到83.53%,与原有聚类卷积方法以及普通的卷积神经网络相比,算法效率有一定提高。(3)将改进的聚类卷积方法应用于医学图像分类中。本文将改进的聚类卷积方法应用于肺部X光图像的结节诊断分类中。本文针对肺部X光图像,构建了多层聚类卷积映射模型,充分发挥聚类卷积网络训练速度块及深层模型中逐层抽象特征映射的优点。新方法相比原始聚类卷积方法具有更强的特征映射能力,与CNN模型相比,新方法在训练速度和特征映射能力上都有一定程度的提高。
其他文献
英语口语作为21世纪人才的必备要素,在我国日益广阔的对外交流环境下,显得尤为重要。作为培养口语能力的英语口语教学,在时代飞速发展的今天,也出现了多媒体技术辅助教学,这
纳米材料凭借着具有区别于传统材料所没有的优异性能正在钻井液中逐步得到推广和应用。本文分析了纳米材料的特性,综述了纳米技术在钻井液中的应用,并针对目前常用的纳米材料
采用植物-土壤渗滤法对农村生活污水进行处理研究,结果表明:体系对BOD5、CODCr、TN、NH4+-N、TP的平均去除率分别为74%、79%、85%、91%、89%,出水达到国家一级排放标准,该工
科举制度是中国传统社会的一大发明。它不但提高了官员的职业素质,也满足了专制君主控制官员选拔的要求,并将儒家思想进一步规范化与制度化,使之成为专制统治的精神支柱,创造
<正> 一、案例简介某外贸公司与新加坡中间商签订出口冷冻蔬菜到西班牙的销售合同。合同中规定:买方必须于2000年3月15日前开立信用证,卖方在收到信用证后1个月内装运货物。2
本论文利用基于金刚石对顶砧的高压原位电学测量手段,协同测量多个电学参量并结合第一性原理计算,系统地研究了化合物半导体SnO、Ag2S、Bi2Te3、Bi2Se3以及Sb2Te3的电阻率、霍
一、项目革新概述金刚石圆锯片全自动高频焊机,主要用于圆锯片基体和金刚石节块的焊接。焊接过程作为一般金刚石工具生产中的一个重要环节将直接影响产品的使用性能。目前,常
综述了近 10年来三氮烯类试剂的合成方法和在环境样品分析中的应用。按三氮烯类试剂合成的方法进行分类 ,分别为在亚硝酸钠和盐酸作用下重氮化的试剂 ,在亚硝酰正离子作用下
在分析烟气分析仪传统校准方式存在缺陷的基础上,通过引入质谱仪作为高精度的参考标准,对固定污染源排放监测系统中的烟气分析仪进行在线校准,以保证烟气分析仪的测量准确性,
目的:分析T管引流拔管后胆漏发生的原因,探讨其处理及预防方法。方法:分析12月共12例T管拔管后胆漏发生的原因,临床表现及处理,提出术中操作,T管的选择、修剪及摆放,拔管时间等