基于改进的TextRank的抽取式中文文本摘要方法研究

来源 :中央财经大学 | 被引量 : 0次 | 上传用户:xiaoshumin82
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络时代的日益发达和各种内容平台及APP的广泛应用,互联网上各类文本信息呈现指数式增长的态势。在现如今快节奏的日常工作生活中,怎样更高效的从大量资源中获得有效信息,已成为人们当今所研究的热门方向。本文以此为立意,对摘要生成算法展开有关的研讨。(1)对传统的TextRank算法进行优化首先,本文从各种客观因素入手,在构建文本的加权TextRank结构图时,充分考虑不同语境下的语句对摘要的影响,同时将外在的结构信息考虑进来,例如文中各语句的位置、关键词等。将上述各种因素抽象成公式,再与TextRank算法相结合进而来得到备选的摘要句子。但由于语言之间会具有一定程度的相似之处,再加上抽取式摘要的局限,得到的摘要注定会存在重复的情况,为精简摘要,就必须用一定的算法对得出的摘要句做更进一步的去冗余处理,去除较为类似的语句。这样一来得出的内容在冗余度、概括性和可读性等方面效果较好。通过试验数据证明,该算法在ROUGE相关指标上表现较好,从而证明了该算法的有效性。(2)依托主题模型和命名实体识别技术,对TextRank算法进一步改造首先利用LDA主题模型对文本内蕴含的主题进行探索挖掘,得到主题-关键词等相关的概率分布,在此基础上结合点互信息对词语节点进行计算和调节。接着使用与深度学习相结合的Bi LSTM-CRF模型对文章中潜在的实体进行标注,得到相关的地点、人物等信息后再次调整词语权重,最后利用改进的TextRank算法生成摘要并进行实验验证。
其他文献
欧阳修身为文坛盟主,其文学成就备受关注,被杨伯子盛赞为“盖得文章之全者”。相较而言,其碑志文受到的关注较少。本文以上海古籍出版社洪本健校笺的《欧阳修诗文集校笺》、中华书局李逸安点校的《欧阳修全集》为基础文本,据统计,欧阳修碑志文共113篇,其中,神道碑铭12篇,墓表14篇,墓志铭83篇,墓碣2篇,行状2篇,并从书写对象、内容和艺术特色三章对其碑志文进行详细研究。第一章将欧阳修碑志文的书写对象划分为
学位
随着经济水平的稳步增长以及人口结构的老龄化发展,人们对高质量和高性价比的医疗需求越来越大。为了解决民众看病难、看病贵的问题,国家全面深化医疗行业改革,稳步推进了一系列医疗改革措施,在这一背景下“两票制”政策逐渐登上舞台。“两票制”指药品在流通环节只开票两次——从生产端到流通企业一次,从流通企业到医疗端一次。它旨在解决药品多级流通、层层加码的问题,意图通过流通渠道的强制扁平化,打击销售环节根深蒂固的
学位
在元代众多曲家中,除元曲“六大家”(关马郑白王乔)之外,仍有曲家有着重要价值和地位。本文试图从曲作、曲选、曲论、曲史等角度综合考量“六大家”之外的“次大家”:即在元曲范围内,包括杂剧和散曲两种形态的领域内,次于元曲“六大家”,但又优于其他曲家的宫天挺和张可久二位曲家。意图表明,在关注元曲“大家”的同时,也应关注“大家”之外的其他曲家。本文主要分为五个部分。绪论部分主要对元曲“次大家”的评定基础以及
学位
一直以来,我国资本市场上中小投资者众多,这一群体获取信息难且专业能力不足,屡屡发生的上市公司财务造假行为对他们造成了极大损害,因此保护中小投资者合法权益成了资本市场监管的一大任务。2014年投服中心的成立无疑为中小投资者保护贡献了新力量,投服中心通过持股行权、纠纷调解和诉讼维权三大业务模式,以“半公共—半私人”实施机制更好地保护了投资者特别是中小投资者的利益,受到了社会各界高度评价。2018年康美
学位
杨官寨墓地位于陕西省西安市高陵区姬家乡,系国内首次发现并确认的庙底沟文化成人墓地,已发掘数百座墓葬。因人骨的物质组成和结构特性,在埋藏和发掘出土过程中,会产生土锈、开裂、钙化、酥粉等病害,其病害机理复杂,包括物理、化学与生物因素,生物因素包含动、植物以及微生物,因微生物个体微小,不易察觉,但同样可能会对人骨保存产生不利影响。因此,本文采用高通量测序技术对杨官寨墓地人骨、土壤及空气环境中的微生物进行
学位
分布式光纤传感技术因具有高灵敏度、抗电磁干扰和长距离连续探测等优点,被广泛用于周界安防、结构健康检测、地震波检测和海洋监测等领域。基于相位敏感光时域反射仪(Phase Sensitive Optical Time Domain Reflectometer,φ-OTDR)类型的分布式光纤传感系统对振动信号的相位信息特别敏感,能够通过相位解调来获得外界声振动信号,从而使该系统成为目前分布式光纤传感系统
学位
房地产行业发展至今,已成为我国国民经济的重要支柱,带动了众多产业向好发展。但在“三道红线”等调控政策公布后,房地产行业融资环境收紧,企业迫切需要新的融资方式。在房地产企业降杠杆压力日渐增大,融资环境日渐紧张的同时,资产证券化市场发展日益成熟。资产证券化具备能盘活企业资产、更新企业融资选择、降低财务费用等优点,成为众多房产企业新的融资选择。尤其近年来,资产支持票据作为较新的融资模式,发展迅速,房产企
学位
2013年十八届三中全会将国有企业混合所有制改革带入全面深化改革的新阶段。2020年中央全面深化改革委员会第十四次会议提出的“三年行动方案”更是为国企深化混合所有制改革提供了详细的、明确的阶段性目标。2019年,科创板的成功开板以及境内分拆上市新规的出台,为具有高成长性、高创新性的国有企业提供了借助资本市场进行混合所有制改革的平台,有助于激发标的公司动力,实现“国有资产保值增值”的目标。本文以中国
学位
叔丁基对苯二酚(TBHQ)能够有效防止食物腐败并维持食物新鲜,在食品工业上得到广泛的使用。但如果过量食用TBHQ,却会对人类生命健康造成严重损害,因此,测定TBHQ的含量对于食品质量监督和保障生命健康具有重要意义。在众多分析方法中,电化学方法因其成本低、操作方法简便、不需要预处理等优势脱颖而出。导电聚合物由于化学稳定性强、导电率高、生物相容性好等优点在电化学传感领域中受到广泛的应用,尤其是导电聚合
学位
自上世纪90年代至今,人类对气候变化的认知日益科学化,治理架构也更加系统,低碳发展逐渐成为全球共识。2020年,我国正式提出碳达峰、碳中和的战略减排目标。在此前,我国相继启动了七省市碳交易试点并设立了审核机构,来审批注册自愿减排项目,森林碳汇的核准认定就属于其中一类。但当下,我国的碳交易市场尚处于起步阶段,也没有针对森林碳汇制定会计处理准则,林木企业的碳汇资源始终没有计入财务报表,造成了财务信息的
学位