TSPT:基于预训练的三阶段复合式文本摘要模型

来源 :计算机应用研究 | 被引量 : 0次 | 上传用户:miumiumin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
抽取式方法从源文本中抽取句子,会造成信息冗余;生成式方法可能生成非源文词,会产生语法问题,自然性差。BERT作为一种双向Transformer模型,在自然语言理解任务上展现了优异的性能,但在文本生成任务的应用有待探索。针对以上问题,提出一种基于预训练的三阶段复合式文本摘要模型(TSPT),结合抽取式方法和生成式方法,将源本文经过预训练产生的双向上下文信息词向量由sigmoid函数获取句子得分抽取关键句,在摘要生成阶段将关键句作为完形填空任务重写,生成最终摘要。实验结果表明,该模型在CNN/Daily Ma
其他文献
一、学会物质的分类是探究物质具有酸碱性的基础  在物质的分类中,通过实验探究,我们把溶液的pH>7的称为碱性溶液,把溶液的pHSi。  乙组同学认为还可以证明非金属性由强到弱的顺序是Cl>Si。  他们的观点正确吗?请说明理由。  【分析】因为盐酸是挥发性的强酸,HCl可能挥发出来,与试管中的硅酸钠反应生成硅酸沉淀,故不能证明同主族元素的非金属性是C>Si,甲组同学的判断错误;盐酸中其酸作用的物质
DIV+CSS布局技术已成为当前网页设计的一种趋势,本文介绍了DIV+CSS布局技术以及利用其设计页面的几个主要优点,并通过举例说明DIV+CSS布局技术的应用思路和核心技术。
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
近年我国的道路桥梁工程得到了迅速的发展,路基路面施工技术也不断完善。作为道路桥梁重要组成,路基部分施工质量会对最终道路桥梁使用时间以及综合性能水平产生直接影响,所
在新常态下,我国商业银行面临的竞争日益加剧,面对的风险日趋复杂,风险管控的挑战也日益加大,可谓是内忧与外患并存。在此背景下,如何提高自身的竞争优势,以求在激烈的竞争中
在社会学理论中,所谓“同辈群体”(peergroup)是指处于同等社会地位的同代人组成的小群体。不用说,这一概念同样可用来指称成人群体。不过,在教育社会学研究中,同辈群体几乎
在园林施工中,经常会使用到节能型技术,对园林使用的能源和资源进行控制,保障工程的环保性.基于此,本文首先进行了节能型技术概述,然后分析了节能型技术在风景园林施工中的应
类比思维是将两个及以上事物进行比较,找出事物之间的相似之处,然后再据此推出其他地方的相似之处.类比思维包括两个方面的含义:(1)类比:在新旧信息间找出相似或相异的地方,即异中求
连续体系桥梁包括连续梁、连续刚构、连续梁—刚构组合体系三类桥梁结构.由于具有良好的跨越障碍能力、成熟的施工技术和较短的施工周期等优势,公路大跨径连续体系桥梁目前在
一、离子方程式书写中的定性问题定量化酸式盐如Ca(HCO3)2、NaHCO3和碱如NaOH、Ba(OH)2的反应,涉及反应物用量的多少,学生反应很难掌握,不管怎么思考,总茫然无绪.那么是不是无法