基于事件热度的新闻自动摘要系统

来源 :西南石油大学 | 被引量 : 0次 | 上传用户:riugrur
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的普及,自动文摘技术在新闻标题生成、新闻摘要生成、搜索结果预览等领域得到了广泛的应用。作为自然语言处理的一个重要分支,自动文摘指对指定文档的主要内容和含义进行自动归纳、提炼进而形成摘要。在众多的自动文摘技术中,基于图论的TextRank算法由于不需要深入的语言学知识以及特定范围或特定语言的语料库而备受关注,并得到了广泛应用。另一方面,随着在线媒体的发展,网络新闻已成为人们获取信息的主流媒介。随着浏览或参与评论的网民数量的增加,网络新闻可能演变为社会热点事件,准确判断新闻热度来帮助人们获取热点新闻从而洞悉社会热点相关信息变得尤为重要。本文对TextRank算法进行了深入的研究,提出一种改进的TextRank算法。首先针对TextRank构建语言网络的过程进行了改进,具体包括:本文改进了 BM25算法,并与基于词共现、TFIDF/COS以及原生的BM25算法进行了对比。TextRank算法在Rouge 1、Rouge2、Rouge3评估指标上的提升验证了改进BM25算法相较于其他三种相似度计算方法的有效性。然后基于摘要新颖性的考虑,本文利用冗余处理技术,对TextRank计算结果中句子的重要性进行修正,从而获得冗余信息较少且相对独立的句子构成摘要。针对实际数据的实验结果验证了该冗余处理技术的有效性。为判断网络新闻的热度,本文还提出了一种热度计算模型。该模型融合了网络新闻的多种要素,从多个角度度量新闻的热度。相关要素包括:新闻浏览量、评论量、同类事件数、新闻发布时间等,其中同类事件采用基于SimHash的算法获得。在需求分析的基础上,完成基于事件热度的新闻自动摘要系统的架构设计、功能模块设计和数据库设计,完成各功能模块的详细设计与实现,通过功能和安全测试,验证系统达到设计的要求。通过基于事件热度的新闻自动摘要系统,用户能快速理解热点新闻。
其他文献
随着经济的快速增长,环境和能源的问题日益突出。传统制备高附加值化学品的方法,大多需要高能耗的输入,而加剧了能源与环境问题。随着半导体光催化技术的提出与发展,人类进入了可同时解决能源与环境问题的新纪元。利用太阳能制备高附加值化学品,能极大程度降低能耗,有望在未来实现可持续发展。过硫酸(S2O82-)和过氧化氢(H2O2)是两种非常重要的化学品,但目前对于光催化产生S2O82-和H2O2的研究非常少,
学位
随着现代化生活的发展,对清洁和可持续能源的需求日益增长,因此能量转化和存储器件中活性材料的研发得到了人们的广泛关注。其中,有机无机杂化金属卤化物钙钛矿太阳能电池光伏材料因为较高的光吸收系数,可调的禁带宽度,长载流子寿命,结合能低等特点,光电转化效率在不到10年内从最初的3.8%飙升到25.2%,成为最受关注的光伏“明星”。作为钙钛矿太阳能电池的核心,钙钛矿吸光层的成膜质量在很大程度上决定了器件的性
学位
由于石油生产的需要和石油泄漏的威胁,油和水分离技术被凸显的十分重要。一方面,油水废物对环境和生物有害,另一方面,一旦废物经过适当处理,油可以重复使用,特别是当水被基本脱除时,大部分油都可以得到很好的利用。对于常规乳化油水混合物的分离,化学破乳是最常用的技术,但它需要消耗大量的材料和能量。对于分层油水混合物的分离,重力沉降是最常用的测量,但它工作缓慢,并且停留时间长,需要较大的设备和空间。水力旋流器
学位
钛合金具有比强度高、耐腐蚀性能好、热强度高、低温性能好等优点,被广泛的应用于航空航天、核工业、电力等重要领域,但是由于钛合金的焊接性和加工性能差,且生产成本高,导致其应用受到严重限制。不锈钢具有力学性能优良、焊接性好、生产与加工成本低等优点,但其与钛合金相比耐腐蚀性能较差和密度较高。将钛合金与不锈钢进行连接构成复合构件,有利于充分发挥钛合金与不锈钢各自的优势,提高构件性能和降低经济成本。在核工业中
学位
微生物岩是一种重要的油气储层。同生-早成岩阶段,微生物岩中有机质的矿化既可以产生酸性流体对碳酸盐颗粒进行溶解,扩大后期成储流体的通道,利于储层的发育;但也可能导致孔隙水处在碱性环境下,形成碳酸盐矿物胶结,阻碍溶蚀流体对储层的改造。因此,有机质矿化过程可能会对微生物岩储层的形成有重要影响,但是目前关于地质历史时期微生物岩中有机质矿化过程及其对储层形成的影响还缺乏实例研究。本次研究选择四川盆地灯影组四
学位
随着化石能源的不断使用,其燃烧后产生的温室气体不断的影响着地球的生态环境,诸如气温上升带来的冰川融化、深林火灾等问题。因此,如何减小CO2的排放成为了当前人们研究的热点之一。同时,中国由于富煤贫油的能源结构,决定了自身需要通过降低对石油的依赖来提高国家能源的战略安全,而我国丰富的页岩气、可燃冰成为了很好的替代能源。基于此,本文通过CO2与甲烷发生重整反应生成合成气,再利用费托合成将合成气转换为液体
学位
近年来,社会快速发展使得个人和企业对金融需求日益增加,而互联网金融服务因能够快速满足用户的金融需求而在国内迅速发展。互联网金融通过对用户信息深度挖掘从而为金融企业提供精准金融服务,降低其金融交易成本,并使得社会金融服务资源配置得到最大化。但同时,由于审核门槛低,信息采集简单等原因,互联网消费金融随之产生了道德风险、逆向选择、个人征信短板、贷前数据维度的采集不足等问题,导致其良好发展势头的背后隐藏了
学位
地震资料去噪和断层解释任务在油气资源勘探与开发过程中扮演着非常重要的角色。传统地震资料随机噪声压制算法存在去噪能力不强,对有效地震信号保护能力差的问题;断层的解释工作存在时间和人力资源成本较大的问题。本文基于深度学习理论,通过构造新型深度神经网络,对地震资料随机噪声压制新方法和断层智能识别新方法进行研究,提高地震资料处理解释能力。其研究成果总结如下:针对基于卷积神经网络的U型网络(Unet)泛化性
学位
随着工业4.0的提出,使得无线网络通信技术和石油领域上带压作业技术的发展迅速,也促进了这两种不同技术的结合。而随着这两种技术的结合,带来的不仅仅是油田的智慧化,也拓宽了无线通信技术的应用领域。在带压作业技术的应用领域上主要存在监控数据多,布线麻烦,数据的实时性不高,人员的安全性和系统的可维护性较低等问题。在使用像WIFI、蓝牙等无线通信技术在石油领域的数据监控上,这些技术主要存在抗干扰性不强,传输
学位
渝东北地区晚奥陶世-早志留世强烈的构造活动导致上奥陶统五峰组-下志留统龙马溪组沉积期沉积环境系统研究相对缺乏。本次论文以渝东北巫溪地区五峰组-龙马溪组底部地层为研究对象,以白鹿、田坝等典型野外露头的详细岩石学及地球化学特征分析为重点,结合巫溪2井、巫浅1等5口测井、钻井资料,对研究区目的层地层和岩石学特征、沉积相特征以及沉积环境岩石地球化学特征展开系统研究,完成沉积环境演化特征分析,并进行页岩气勘
学位