基于天牛须搜索算法的神经网络并行优化研究及预测应用

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:qiuxue6
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
预测问题通常十分复杂,受很多潜在因素影响,而且传统的预测模型在考虑复杂的非线性关系方面存在局限性,这通常导致预测问题难以解决。鉴于BP神经网络有对事务特征建模以及提取事物之间隐藏关系的能力,以正确的方式应用它可以作为传统预测模型的替代方案,而且与传统预测模型不同的是,BP神经网络对输入和残差分布没有施加任何限制。但是,BP神经网络也存在一些缺点,例如收敛速度慢,以及容易陷入局部极小值等问题,这使得建立精确的预测模型变得困难。针对这种情况,本文研究了优化BP神经网络的方法,主要包括:(1)提出了一种智能优化算法(BAS Optimizes Weights,简称BASOW)来优化神经网络,该算法主要在神经网络权重训练阶段引入天牛须搜索算法(Beetle Antennae Search,简称BAS)进行训练,是一种代替误差反向传播形式的训练方式。鉴于BAS算法的全局寻优能力以及单体的寻优策略,BASOW算法提高了神经网络的训练效率,而且在人口预测应用中,该算法展现了良好的预测能力。(2)当神经网络结构变得复杂,待训练参数数目增多时,BASOW算法的训练复杂度也随之上升,完成神经网络训练任务将会变得困难。为了解决这个问题,本文提出了改进的BASOW算法(improved BASOW algorithm,简称iBASOW),该算法采用合作研究的思想,将BAS算法和BP神经网络融合到一个单独的系统中,让前者用于系统初始权重优化,后者用于系统权重训练,二者扬长避短,相互促进。(3)由于BASOW和iBASOW算法都只针对单个网络的训练,这种单一的训练方式可能会造成预测精度上的波动。为了进一步提高神经网络的预测稳定性,在所提iBASOW算法的基础上,提出一种基于Spark的改进神经网络并行优化算法(Parallelized iBASOW algorithm,简称 P-iBASOW)。该算法是以集成学习思想为导向,Spark分布式计算框架为依托,用数据并行化的方式训练改进后的神经网络模型。通过在4个真实数据集进行的测试,对比BP和其他算法的预测性能可以发现,并行优化后的iBASOW算法,即P-iBASOW算法,具有较优的预测能力以及预测稳定性。
其他文献
自1994年我国正式接入国际互联网以来,网络安全政策经历了20余年的发展和演变。作为我国新时代网络安全工作开展的重要组成部分和关键支撑,我国网络安全政策体系是确保网络安全的重要保障和人民生活幸福美满的重要保证。当前我国网络安全工作虽然取得了一些成效,但也存在一定问题,这些问题的存在不利于我国网络安全工作的开展,阻碍了网信事业的全面发展。基于此,本论文在收集1994-2018年间我国网络安全相关的政
二十世纪后期,机构投资者在西方资本市场的迅速崛起,不仅改变了上市公司的股权结构,而且也为公司治理提供有效的外部治理方法。二十一世纪初,为了紧随全球资本市场上机构投资者发展的脚步,我国政府也颁布、实施各项政策积极鼓励机构投资者的多元化发展。机构投资者作为资本市场的“风向标”,其行为会在资本市场上传递某种信号或讯息影响广大投资者的行为,本文选择从会计信息质量的视角出发,研究机构投资者的持股偏好问题,从
化学图论是应用图论的一个重要研究领域,主要研究(分子)图的拓扑不变量和拓扑性质及其与化合物的物理化学性质之间的相关性.在化学图论中,拓扑指数作为描述化合物的分子结构的一种图不变量,不仅能够实现分子结构信息的数值化,还能够反映出化合物的物理化学性质和生物活性,在化合物的定量结构-性质关系(QSPR)和定量结构-活性关系(QSAR)的研究中具有重要的应用.本文主要研究了两类基于度的拓扑指数——广义AB
基于高分辨率遥感图像的获取途径越来越便捷,遥感图像处理的应用场景逐渐广泛。常见遥感图像处理软件先对地物特征采样,利用图像处理算法做图像分割,由于分割轮廓细碎导致修正过于耗时,且图像处理的反馈不及时,因此设计实现一种遥感图像地物标注系统有很强的现实意义。本文基于OpenCV图像处理库,开发了辅助人工标注图像的遥感图像地物标注系统。可以在原始图像上,人工粗略使用选择框选定标注区域后,由计算机进行轮廓检
随着大数据、人工智能、物联网技术的发展,网络终端设备的数据处理量爆炸式增长,使得终端嵌入式计算设备的缺点逐渐显现,主要表现在:一方面单一终端设备使用场景和功能相对固化,使得设备资源利用率不高,存在计算资源过剩的现象。而另一方面需要进行大数据量信息处理的用户,自身的终端资源不够用,受成本限制又难以更新高性能电子设备。因此,基于上述问题,并结合目前“云+高性能计算芯片”一体化加速,协同发展等热门研究领
随着通信网络技术的发展,第五代移动通信网络(5th Generation Mobile Networks,5G)已经进入我们的日常生活。为了满足移动用户日益多元化、个性化的服务需求,5G网络将是多种无线接入技术融合共存的网络,异构融合接入将成为5G主要特征之一,5G网络的应用场景也变得更加复杂和多样化。但随之而来是5G异构网络面临了更加复杂的隐私安全问题,如窃听、干扰攻击、拒绝服务攻击和分布式拒绝
区域经济的不断发展以及城镇化、工业化进程的加快,导致大气质量的恶化愈演愈烈。而大气质量优劣对我国的生态文明发展产生着很大的作用,也直接影响着我们的生活质量。人类要
随着信息通信技术的不断发展,互联网飞速发展,各行各业进行信息化改造和建设,国家也在战略层面提出了“互联网+”的概念。随着电子设备越来越智能化,对设备信息采集也由以前的人工现场监控录入逐步实现了设备的自主采集、上报数据给平台,并且平台还能远程对设备进行遥控遥调。“互联网+业务+智能设备”的信息化平台,即物联网平台。可以将物联网分为四个层次八个产业链。四个层次为感知层、网络层、平台层、应用层。八个产业
农村居民点复垦作为当前我国补充耕地资源的主要来源之一,是保障我国粮食安全的一项重要工作。农村居民点复垦前的土壤受到较强烈生活、生产活动的长期影响。复垦过程中的表
本文研究了一类具有双侧约束碰撞振动系统的近擦边动力学行为的控制问题,以及一类具有非光滑特性的耳蜗背侧核(DCN)椎体神经元的分岔控制问题。这两类系统都属于第一类非光滑系统,即脉冲系统。具体研究内容如下:第一,对具有对称约束的二自由度碰撞振动系统,通过近擦边动力学分析,发现其擦边分岔会在三种情况下失稳,以及在四种情况下产生一类余维二擦边分岔。针对这一不稳定性问题,提出了一种通过控制双侧擦边周期轨道局