基于深度学习的新闻文本分类与自动文摘系统设计与实现

来源 :电子科技大学 | 被引量 : 2次 | 上传用户:dragon122
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网信息不断更新传播,信息过载的现象日益严重。相较于图像和语音,新闻文本的表达并非直观,而是需要采取人工阅读理解的方式,这导致筛选有效信息困难,严重影响人们的阅读兴趣。基于此,本文基于新闻文本,采用自然语言处理技术和深度学习方法对新闻文本进行处理,实现细粒度的新闻文本分类,针对特定新闻主题下的新闻,实现生成式新闻摘要。设计并实现新闻文本分类与自动文摘系统,便于用户既能更有针对性的浏览相关感兴趣的新闻报道,又能阅读到精炼汇总的新闻资源,有效地节省了用户的宝贵时间。本文的研究内容具体如下:1.针对新闻文本分类中的新闻标题特征稀疏,上下文依赖性强的问题,研究基于语义增强的新闻文本分类方法。首先利用Bert语言模型替代传统的Word2Vec进行语义表征,然后结合改进的基于自注意力机制的Bi-LSTM自适应提取上下文特征,结合模块融合思想并且根据上述结构提出了语义增强的分类模型Multiple-Fusion。此外,本文还设计了基于词级别的数据增强策略进行文本数据增强,以提高分类模型泛化性和精度。2.在细粒度新闻文本分类的基础上,提出基于生成式的自动文本摘要模型应用于新闻摘要。针对新闻摘要表达缺乏流畅性和概括能力的问题,首先提出了向量融合机制FME进行词向量表征,接着采用基于Encoder-Decoder框架的Transformer网络模型自适应提取文本全局特征。融合两者结构形成基于生成式的摘要模型FME-Transformer,并将其应用于新闻摘要。实验结果表明生成的新闻摘要基本能接近人类理解的水平。3.设计并实现基于深度学习的新闻文本分类与自动文摘系统。该系统以提出的算法模型为核心,针对《新华网》新闻数据,设计并实现了新闻采集、新闻文本分类及新闻摘要生成等核心功能模块。该系统功能齐全、界面友好,满足实际需求。此外,本文通过对系统进行功能与性能测试,验证了系统的可用性和高效性。研究成果对文本分类及自动文摘领域的研究具有实际借鉴意义。
其他文献
修女院是西方修道制度中不可或缺的一部分,在“文化传承”、“精神支撑”上同修道院具有相同的地位。在女性处于边缘化的时代中,修女院超越两性的不平等,填补了中世纪女性教育的空缺,在西方文化历史上产生了深远的影响。本文将主要运用历史分析法来探究中世纪修女院教育在不同时期发展的特点,深入剖析当时修女院教育的状况,归纳修女院教育所具备的特点,最后分析修女院教育所产生的历史影响以及对其做出合理的评价。本文分为五
[摘 要]审计署2011年发布的报告进一步的指出了我国现阶段地方政府性债务不断膨胀的事实,如何将地方政府性债务风险控制在合理区间,首先必须了解债务膨胀的成因。本文在理顺我国“压力型”政治体制的特点,明晰“财权上收,事权下移”财税格局的现实,并结合 2008年以来为应对金融危机所采用的财政政策和货币政策情况,对我国地方政府性债务膨胀的必然性做出了分析。   [关键词]地方政府性债务;地方性公共品;政
目的:探讨心房颤动(简称房颤)患者导管消融术后失访的现状及相关影响因素,为房颤术后规范管理提供科学依据。方法:选取新疆医科大学第一附属医院心脏中心2017年1月至2017年9月收治的房颤术后患者141例,根据检索门诊系统判定是否完成随访,电话调查患者失访原因。根据是否完成第12个月随访,将患者分为失访组和随访组。对比两组临床资料,采用logistic回归分析失访影响因素。结果:第12个月共89例完
随着我国改革开放几十年以来的经济的快速增长,居民可支配收入显著提升,旅游已经成为一种重要的生活方式,旅游是美好生活的组成部分。国民旅游进入大众化时代,自助游、自驾游、自主游市场需求旺盛,旅游消费升级浪潮的推动下旅游业面临着转型升级的压力,旅游目的地需要全面提升和改造,亟须升级旅游基础设施和公共服务能力,旅游业也需要转变发展理念和发展模式,以应对新的旅游消费需求。面对新的发展势头,各相关部委纷纷出台
脑出血,尤其是重症高血压脑出血作为一种发病率高、致残率高、病死率高的疾病、严重威胁着人们的健康。脑出血发病后12 h内测定的收缩压超过140-150 mm Hg(1 mm Hg=0.133 kPa)
曲轴油封是发动机总成中的重要零部件其密封性能直接影响到发动机的总体性能。随着汽车工业的发展,发动机整机性能不断强化,曲轴线速度不断的提高,这对于曲轴油封的密封性能提出了更加严苛的要求。传统的曲轴油封结构设计很大程度上依赖于设计者的经验,曲轴油封的密封性能只有在产品成型之后,通过实验检测的方式来获取,这种开发流程成本很大。随着计算机技术的发展,将仿真分析融入曲轴油封结构设计和性能研究中成为了曲轴油封
在知识经济时代,企业以网络的形式参与竞争,其竞争优势也源于企业网络。企业网络理论的研究,以经济学、战略理论、社会学为主要维度融合发展。国内外学者对于企业网络的绩效,