融合分层极限学习机算法研究

来源 :湘潭大学 | 被引量 : 0次 | 上传用户:zjr_1988
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度学习目前无论在理论研究还是实际应用上都已经达到了前所未有的高度。现实生活中很多相对复杂的问题都能通过深度学习来解决。然而,深度学习网络结构大都比较复杂,往往不能在期望时间内有效地解决问题。极限学习机依靠快速的学习能力,强大的拓展能力和泛化性能以及不易陷入局部最优等优点,吸引着世界各地的学者以它为基础促进各自领域地发展。但是,极限学习机的单隐层网络结构极大限制了其特征映射的能力,在解决高维大数据问题时往往显得力不从心。综合以上两种思想,近几年学者提出了许多极限学习机与深度学习优势互补的模型,如双隐层极限学习机,多层极限学习机等。这类网络通过多层的网络结构提取原始数据的高层抽象特征表示,同时基于极限学习机思想快速对网络参数寻优,在快速学习的基础上还能提取输入数据的高层抽象特征。本文主要针对极限学习机浅层结构的缺点,在算法网络层数以及网络权值的计算方法上做了一些改进,具体工作如下:1.在网络结构上对前人提出的双隐层极限学习机进行改进,在解除原双隐层极限学习机两个隐层节点数相等限制的同时减少了广义逆矩阵的计算次数。无论在学习速度,测试精度以及网络灵活性,改进的双隐层极限学习机相比于原双隐层极限学习机都有一定程度的提升。2.基于分层极限学习机的分层思想提出了一种新的多层网络结构——融合分层极限学习机。该极限学习机的特征提取部分采用基于极限学习机的自编码器重构原始输入特征,同时引入奇异值分解法更好地表述特征。分类部分采用本文提出的的改进双隐层极限学习机。另外,通过Relu激活函数的稀疏激活性获得原始数据的稀疏特征表示。3.提出了一种融合分层极限学习机的参数优化模型,叫做正则化融合分层极限学习机。在融合分层极限学习机特征提取部分,正则化融合分层极限学习机不仅对权值进行L2范数优化,同时还加上L1范数约束条件,从而得到既能有效减少过拟合现象的出现又能获得网络稀疏性的网络结构。为验证算法有效性,针对不同的算法本文共选取了 14个不同的数据集。为全方位比较两种双隐层网络,本文选取了十多个不同类别,不同维度的数据集用作对比实验。为了比较融合分层极限学习机和分层极限学习机的特征提取和分类能力,本文选择了三种代表性地图片数据集;为了证明正则化融合分层极限学习机能弥补融合分层极限学习机在测试小数据集上的缺陷,本文从上述数据集中选择部分小数据集进行实验。相关实验结果证明了文本提出的算法的合理性。
其他文献
MoB-CoCr涂层具有耐腐蚀、耐磨损等优异的性能,在热浸镀领域具有很高的应用潜力。本文利用超音速火焰喷涂技术(HVOF)在316L不锈钢基体上制备MoB-CoCr涂层,研究了喷涂参数、粘结层和Y_2O_3对涂层性能的影响,分析了腐蚀前后涂层组织结构和物相的变化,解释了涂层在腐蚀过程中的失效机理,有效地提高了涂层的耐腐蚀性能。主要研究结果如下:(1)采用超音速火焰喷涂技术制备了MoB-CoCr涂层
皮肤组织打印的基本原理是将能够实现各种功能的细胞和具有优良生物相容性的材料相结合,通过打印的方式构建细胞与生物材料的三维复合组织,其基本要素包括细胞、材料和打印构建方式。人工皮肤组织构建和使用的过程中,在没有血管的情况下,由于内部氧气和营养物质供给困难,会导致细胞活性不佳甚至死亡。所以人工构建的皮肤组织对于实现血管化有着非常迫切的需求。本学位论文基于课题组自主研发的生物三维打印系统,开展了适用于血
本文通过对T公司的铁路商品汽车物流业务及未来发展进行分析,随着运量的增加与业务模式的拓展,T公司物流信息系统的问题也随之而来。商品车物流各个环节中产生的庞大数据量,
光学镜头在制造过程中,光学装调工艺是直接影响系统性能和精度指标的关键环节。从精密光学镜头制造行业现状看,光学镜头的装调主要通过操作经验丰富的技术人员,辅以相关的光
在中学历史教学中,教学内容的衔接是一个无法规避的课题。初三年级学生升入高一,面对全新的学习环境,新的历史教科书,历史课程安排的增加和陌生的历史教师,往往需要一段时间适应。如果教师能充分研究历史教学内容的衔接问题,帮助学生实现高中教学和初中教学对接,在巩固学生初中历史知识体系的基础上,让学生与初中历史知识做到融会贯通,并在此基础上提升历史思维能力,将对高一学生起到良好作用。初高中历史课标、教材的不同
珠海城际盾构施工项目地质复杂,滚刀损坏严重,更换损坏的滚刀是一件很棘手的问题,带压进仓是解决盾构损坏刀具更换最经济和高效的施工方法,带压进仓换刀过程中通过地质加固、
改革开放以来,我国扶贫工作取得了巨大进展,成功开辟出一条中国特色扶贫道路。改革开放初期,我国贫困人口超过7亿人,贫困发生率达80%以上,至2012年我国贫困人口减少为9899万人,贫困发生率为10.2%,到2019年贫困人口仅为551万人,贫困发生率降到0.6%,扶贫工作的进行大大减少了贫困人口,降低了贫困发生率。实现2020“全面小康”的目标已开始进入收官验收之年,随着我国农村扶贫工作的开展和深
协商民主是中国民主的重要内容,是社会主义民主政治的特有形式,也具有独特优势,对于协商民主的体系,可以包括政党协商、人大协商、政府协商、政协协商、人民团体协商、基层协商以及社会组织协商。基层协商作为协商民主重要的协商形式,在人民行使民主权利中发挥着越来越重要的作用。为适应形势变化需要,近年来,济南市市中区按照协商于民、协商为民的要求,探索推进基层协商民主工作,充分发挥社区党组织核心引领作用,以协商的
一个研究领域中的科技前沿往往是指该领域中最为先进、最有发展潜力的研究主题或研究动向,而识别科技前沿是研究技术的创新路径和发展趋势、提升科技创新能力必经的过程。目
目的:本文旨在通过研究五运六气与登革热中医证候特点两者的相关性,讨论运气学说对登革热的证候特点及病机的影响,并将理论与临床相结合,探讨其在登革热诊治和防控方面的作用。方法:采用回顾性的研究方法,以2017年1月20日(丁酉年大寒日)到2019年1月19日(己亥年大寒日前)于广东省中医院门诊或住院部确诊的登革热患者为研究对象,参考文献并根据实际研究需要制定病案信息收集表,内容包括一般信息和主要症状等