基于深度学习的文本摘要分析与实现

来源 :北方工业大学 | 被引量 : 0次 | 上传用户:qhjiso
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网技术的飞速发展以及社交媒体的不断普及,新闻、舆论、热点等各种各样的信息呈井喷式发展,飞速发展带来了信息过载的问题,并且随着生产生活节奏的加快,人们没有足够的时间来阅读所有搜索到的信息。高质量的文章摘要是提升信息获取效率的有效手段。随着深度学习的兴起和计算机硬件水平的提升,越来越多的学者利用深度学习进行自动文章摘要生成。本文对传统中文分词算法提出优化改进并提出基于双层注意力机制的中文摘要算法,最后将改进后的中文分词算法应用于中文摘要算法中。传统中文分词算法无法高效地提取局部特征,且无法进行并行计算。针对以上两点本文提出了一种基于简单CNN与BI-LSTM相结合的中文分词算法,既解决了CNN无法提取时序特征的问题,也解决了BI-LSTM无法提取局部特征以及无法进行并行计算的问题,同时利用权重共享的全连接操作保证了依据上下文信息获取分类结果,实现了一输入对多输出的目的。实验结果表明,该算法具有可行性且模型输出结果的准确率可达98%。传统Seq2Seq摘要生成模型大多采用LSTM网络和单层注意力机制实现,由此会导致模型计算缓慢且注意力矩阵中包含信息不足。针对以上问题,本文在以下几方面进行了改进:(1)在构建输入矩阵时,使用改进后的中文分词算法提升分词的准确率,以此提升生成词向量的准确性;(2)在特征提取时,利用偶数卷积核减少参数数量,在不降低模型准确率的前提下提升了模型训练的速度;(3)对注意力机制进行改进,建立双层注意力机制,通过产生两个不同的注意力矩阵分别获取全局信息和局部信息,并将两个注意力矩阵融合得到最终注意力矩阵,利用第二层注意力矩阵强化目标词语周围临近词语的权重,从而提升文章摘要的准确率。将改进后的中文分词算法应用于双层注意力机制的中文摘要算法,在LCSTS数据集上进行实验验证,采用Rouge测评方法对文章摘要进行测评。本文提出的基于双层注意力机制的文章摘要模型的Rouge-1、Rouge-2以及Rouge-L得分可达到37.8、25.3以及34.9,验证了模型的可行性与准确性。
其他文献
随着数字采集设备以及社交媒体的普及,网络上存在海量的视频及图像数据。这些海量的数据通过人工收集和标记,可以帮助人们设计监督学习方法来完成不同的识别、分类等任务。然
废弃印刷线路板(Printed Circuit Board,PCB)非金属部分主要由热固性树脂与玻璃纤维组成,较难以资源化利用,通常都直接焚烧或者填埋处理。本文以废弃PCB非金属粉(NWPCB)为载体负载纳米材料(氧化石墨烯(Graphene Oxide,GO)、碳纳米管(Carbon Nanotube,CNT)、纳米石墨,以聚丙烯(Polypropylene,PP)为基体制备复合材料。首先制备废
如今,每年都有许多人的脚踝由于扭伤或在运动过程中受到伤害从而失去脚踝的运动能力。利用康复机器人辅助脚踝关节完成康复训练运动,成为目前脚踝关节康复研究领域的主要趋势
对区域已有建筑的地震易损性评估可为城市防震减灾工作提供重要科学依据。通过敏感性分析找出对结构地震易损性影响较大的结构特征参数,可有效减少对区域建筑群体的参数调研
当下,社会经济正处于蓬勃发展的状态,世界各国人头攒动,公共场所的安全检查工作显然变得非常重要。随着毫米波成像技术在安检领域的逐步发展,研究更精准、更快速的毫米波图像
近年来,我国开始大力倡导和发展节能降耗工程,以提高目前的能源利用效率。吸收式动力循环能够高效利用工业废热、地热能等中低品位能源,并将其转化为有用功,从而提高能源综合利用率。本文主要针对吸收式动力循环系统的工质体系进行了研究。首先,根据吸收式动力循环系统的性能要求以及吸收剂/CO_2二元工质对的配对原则,遴选出正壬烷/CO_2、1-戊醇/CO_2、1-辛醇/CO_2、丙酮/CO_2、2-戊酮/CO_
安全生产是企业持续、稳定、健康发展的基础,安全生产问题一直是企业最关注的的问题之一。得益于科学技术的进步,企业生产所需的机械设备安全性和稳定性不断提高,生产中由于
高铁酸钾(Ⅵ)有超强的氧化性,是一种集氧化、杀菌、吸附、絮凝于一身的多功能绿色水处理剂。含氮、含硫化合物是造成水污染的重要物质,它们的存在与消毒副产物的形成、膜污染、水体富营养化、化学需氧量的增加等各种环境问题密切相关。高铁酸钾能快速有效地氧化这类污染物,不产生致癌的副产物,并且还原产生的三价铁对人体和环境均不会造成危害。大多数文献关注的是高铁酸钾广泛应用的研究,但是对其动力学数据及机理的报道尚未
人们对收入和支出的不确定性以及金融市场不完善导致信贷约束等现象的存在,导致我国居民可支配收入的一部分用来储蓄。在刺激消费方面,许多学者指出可从完善社会保障体系入手
目的:本研究旨在观察调神针法在治疗绝经前后诸症中的作用,通过调神针法与常规针法治疗肾阴虚证绝经前后诸症的临床研究,得出有效、客观的临床数据,以评价其临床疗效,获得更为科学、客观、有效的治疗方案,为绝经前后诸症的针灸临床治疗提供治疗思路及临床应用依据。方法:选取2018年1月至2019年1月在广州中医药大学第一附属医院针灸、妇科门诊就诊的绝经前后诸症患者,参照规定的标准,将符合纳入标准、不符合排除标