基于确定性丢弃连接的深度卷积神经网络算法

来源 :天津大学 | 被引量 : 0次 | 上传用户:wxj1234567
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
卷积神经网络是一种被广泛使用的深度学习算法,在图像识别、语音处理和生物医疗等众多领域取得了重大成果。随着计算机技术的飞速发展,大数据的获取和高性能计算都成为可能,这极大地促进了卷积神经网络的发展。但是其依然存在一些缺点,需要对其进一步地研究改进。相比于传统的神经网络,深度卷积神经网络能够学习更丰富和更具识别力的特征,但是由于其具有更深的层数和更多的参数量,所以容易产生过拟合问题。针对这一问题,本文提出了一种基于确定性丢弃连接的深度神经网络算法。该算法在训练过程中确定性地丢弃滤波器中绝对值较小的权重,增加网络的稀疏性,避免网络对训练数据产生记忆,从而抑制深度卷积神经网络的过拟合现象。在图像分类实验中,本文提出的确定性丢弃连接算法能有效提升网络的分类性能,相比于其它正则化方法具有更好的效果。由于参数较多、计算复杂度较高,深度卷积神经网络在一些计算及内存受限的设备上应用受限。目前基于单分类器的卷积神经网络中所有样本都需要经过所有层提取特征,并在最后一层进行分类,因此对于一些易于分类的样本存在计算资源浪费的问题。针对这一问题,本文设计了一种基于级联结构的多分类器卷积神经网络。在网络中使用多个分类器,利用低层特征对简单样本进行提前分类,利用深层特征进行复杂样本分类,从而降低了网络的计算量。相比于传统单分类器网络,在识别率基本一致的情况下,基于级联结构的卷积神经网络能够有效地减少26.9%的计算量。实验结果表明,利用级联多分类器结构能够有效地降低网络的总体计算量,从而提升网络的计算效率,进一步促进深度卷积神经网络在更多领域的应用。
其他文献
目的在家庭自然环境下,对纠正月龄0-4月内孕32-36周病情相对平稳的早产儿的睡眠/觉醒模式进行纵向随访,探讨早产儿早期睡眠/觉醒模式的发展变化特点及其与气质和认知发育的关
本次英译汉翻译实践选自《文化差异起源以及对管理的影响》,译自美国作家杰克斯卡伯勒的THE ORIGINS OF CULTURAL DIFFERENCES AND THEIR IMPACT ON MANAGEMENT一书。本书视
近些年,随着计算机技术的发展和互联网的普及,通过多媒体设备传输视频图像进行信息交流越来越方便,所以计算机视觉拥有着越来越重要的地位,其中视觉跟踪技术是计算机视觉的一个重要研究方向。视觉跟踪算法的基本原理是根据视频序列中第一帧图像给出的目标信息提取目标特征,在后续视频帧中,根据所提取的特征准确定位目标对象。在传统的视觉跟踪算法中需要手动地提取目标特征,这样的跟踪算法鲁棒性差,在目标发生形变、遮挡等情
随着化石能源的日益枯竭和环境的日益恶化,中国乃至世界都在大规模开发和利用新能源。基于模块化多电平换流器(Modular Multilevel Converter,MMC)的柔性直流电网不仅具备柔
高速换道是一种容易引发交通事故和拥堵的驾驶行为,严重影响了行驶安全和交通系统效率,智能车辆换道行为控制技术的研究是防止事故发生的有效手段。本文以高速换道场景为研究对象,为实现智能车辆进行更加安全、舒适和高效的换道,对智能车辆换道行为控制技术中的换道行为决策、轨迹规划和轨迹跟踪控制算法进行研究。为了合理评估车辆换道的安全态势,提高车辆换道决策的准确性和安全性,通过对驾驶员换道过程和高速公路行车环境的
我国是自然灾害和事故灾难最为严重的国家之一,灾害种类多,地域分布广,发生频率高。频发的自然灾害等各种安全事故已经成为影响我国经济发展和社会稳定的重要因素,给我国人民
钢管约束型钢混凝土结构是从传统钢管混凝土结构上演变而来的一种新型结构形式,在柱内约束的混凝土中配置钢筋和型钢可使结构的抗弯、抗剪能力得到有效提升,应用前景十分广阔。近年来,国内外学者针对此类新型结构形式展开了系统性的研究,但多针对于典型构件的轴压性能,而结构梁柱节点的理论研究体系因缺乏典型梁柱节点构件的研究而较为匮乏。课题组前期设计了两个RC梁-圆钢管约束型钢混凝土柱环梁节点(Ring Beam
山西以“小杂粮王国”闻名海内外,大力发展其优势杂粮,对发展山西特色农业具有重要意义。在粮食收购入库的各个环节中,含水率是常规检验的一项重要指标。含水率过低,将破坏其有机质,使小杂粮减重。含水率过高,则会加强粮粒的呼吸作用,导致发热、霉变和生虫等问题的产生。目前,市面上成熟的商用水分测试仪已有不少,但主要用于小麦、水稻等大宗粮食,针对燕麦、藜麦等小杂粮的专用水分检测仪仍较为少见。因此,有必要研发一款
本研究的主要目的是了解人为安全干预对施工安全管理成本的影响本研究还旨在了解技术安全干预对施工安全管理成本的影响本研究的另一个重要目的是了解管理安全干预对施工的影响安全管理费用。本研究以建筑安全行为为中介。为了了解人、技术和管理安全干预对施工安全管理成本的影响,在存在施工安全行为中介影响的情况下,笔者收集了388名巴基斯坦建筑业相关人员的数据。本研究亦提出一些假设,以期验证及得出有效结论。这项研究纯
由于激光的问世,使得新型的光检测技术可以作为一种精确度较高、非接触型的检测手段,并且可以通过光的不同的性质来进行检测,从而光纤传感器就获得了迅猛的发展。此外,调Q光