LSTM循环神经网络的研究进展与应用

来源 :黑龙江大学 | 被引量 : 0次 | 上传用户:shermanx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能时代的到来,人们对于数据内部潜在的价值越来越关注,对于数据的挖掘和使用能力越来越强.在大数据时代,神经网络技术受到了极大关注,其中备受瞩目的便是循环神经网络(RNN).RNN因为隐藏层内部存在自连接结构常被用于处理时间序列数据数据,但这个经典的神经网络也存在其无法克服的缺点.RNN在训练过程中容易出现梯度消失和梯度爆炸的问题,虽然梯度消失问题可以通过改变激活函数,调整学习率等方法来缓解;梯度爆炸问题可以通过梯度截断和权重衰减来缓解,但这并不是很好的解决方式.在1997年所提出的长短期记忆神经网络(LSTM)通过在隐藏层节点内加入记忆单元和门控机制,不仅可以记忆长期信息,还可以有效避免RNN中的梯度消失问题.后来更多学者对LSTM的结构不断进行探索与优化,形成了各种结构的LSTM的变体,在不同领域有着广泛的应用.本文主要深入探讨了LSTM的由来,通过了解LSTM是为何提出以及其网络结构的工作原理达到对模型的深入了解,并列举了近些年来关于LSTM网络的研究进展.在此了解基础上对LSTM网络进行实际操作应用.期货市场数据具有非线性高噪声的特点,一般的模型难以准确提取数据特征把控数据的走势,但是LSTM网络具有长期记忆能力,对于时间序列数据的学习能力表现优异.因此在本文应用LSTM神经网络来预测豆粕期货的收盘价格,并且取得了不错的预测效果,并与传统的机器学习算法-支持向量机(SVM)预测结果作对比,发现LSTM的预测效果要优于SVM.
其他文献
相比于在加工生产方面的研究,机器人绘画方面的研究比较少,开发绘画功能是研究机器人很好的载体,机器人绘画在工业喷标和科普教育等领域有着广阔的应用空间。机器人绘画首先需要提取图像轮廓,提取轮廓采用的边缘检测技术是图像处理、模式识别的重要组成部分,是其他图像操作的基础,在工业、农业、医学等领域得到了广泛应用。与机器人雕刻、焊接、涂胶等工业场景所需要研究的内容类似,同样也可
公元前66年至公元628年间,以地中海盆地为核心的罗马—拜占庭帝国与以伊朗高原及美索不达米亚平原为核心的帕提亚—萨珊帝国之间发生了一系列周期性相互攻伐,即所谓的“罗马波斯战争”。罗马波斯战争从广义上延伸,可以指公元前1世纪至公元7世纪期间罗马人(晚期罗马共和国、罗马帝国和早期拜占庭帝国)与波斯人(帕提亚帝国和萨珊帝国)为争夺西亚地区进行的长达七个世纪的政治、军事、宗
在以家庭照护为主的现实下,儿童照护问题不仅影响社会生育意愿和生育选择,还关系到家庭照护者的就业问题。国内外现有的研究,在探究儿童照护的就业效应方面,虽然做出了一些探究,但总体而言仍有许多待扩展和深入的地方,尤其是基于不同社会文化背景的分析。如,如何基于中国低生育率和老龄化这两个宏观背景,认识当前儿童照护与就业之间的关系?在当前中国社会,儿童母亲提供的儿童照护活动对其
笔墨松喦:钱松喦诞辰120周年纪念展7月31日在中国美术馆开幕,展出至8月11日。本次展览以祖国山河抖擞描迢迢我自江南来拾翠披云寻我师三个主题,将展出中国美术馆馆藏20幅及家属提供钱松喦作品
《中华人民共和国行政处罚法》第三十七条第二款和《烟草专卖行政处罚程序规定》第三十二条第一款赋予了烟草专卖行政主管部门实施先行登记保存的权利。从法条原文中可以看出,先行登记保存行为仅仅是一种保存证据的措施,是一种暂时性的行为,其立法目的是为了减少查封扣押的行政强制措施滥用而创设的一种行政行为。在烟草专卖行政执法过程中,先行登记保存是烟草专卖主管部门唯一可采取对违法卷烟
分类号D601学校代码86406UDC32密级公开中共广东省委党校硕士学位论文新中国成立初期民族地区民主改革中的特殊政策研究ResearchontheSpecialPolicyoftheDemocraticReformintheMinorityRegionsintheEarlyPe
学位
目的:本研究旨在利用生物医学信息技术方法开发能识别视网膜血管性疾病黄斑病变的光学相干成像(opticalcoherencetomography,OCT)图像病灶并对其进行自动定量分析以及利用多光谱成像(Multispectralimaging,MSI)分析形态学变化的方法。方法:我们共收集50例病理性近视(pathologicalmyopia,PM)病人、20例糖尿
颗粒增强铝基复合材料因其质量轻、比强度和比刚度高、耐磨性好等优点广泛应用于航空航天、汽车工业和电子仪器等领域。其中涉及的增强相/基体界面结合机制及增强相对复合材料性能的影响这一科学问题受到研究者广泛关注。传统颗粒增强铝基复合材料大多采用陶瓷颗粒作为增强相,界面结合情况较差,导致复合材料的塑韧性受到严重影响。由于金属-金属间具有较好的界面润湿性及相容性,采用硬质金属颗
数字经济时代、企业数字化转型和新就业形态等新形势对高职学生学习和未来职业发展提出必然要求,高职学生数字素养水平直接影响了其未来就业和能力发展乃至高职教育数字化发展的步伐。本研究旨在通过构建高职学生数字素养评价模型,调研高职学生数字素养水平状况,为高职院校开展数字教育和高职学生自身发展提供一定的参考。在对数字素养以及高职学生数字素养相关文献梳理的基础上,以胜任特征模型
小学阶段是一个人树立正确的价值观、世界观的重要时期,学生的品德行为正处在“质”的变化过程中,可塑性强,帮助小学生们扣好人生的第一颗扣子至关重要。德育所包含的政治态度、道德品质、世界观等方面的教育,是促进学生全面发展的保障,在学生的发展过程中起到了指示灯的作用,保证着学生能够沿正确的方向前进。沂蒙红色文化诞生并发展于革命战争年代,内涵丰富,有着多样的存在形态,还有着重要的育人价值,有助于学生树立远大