网络新闻突发事件信息抽取技术研究

被引量 : 8次 | 上传用户:uan998
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在网络信息爆炸时代,突发事件发生后,相关的新闻数量呈指数级增长。面对海量的网络数据,快速、准确地获取突发事件信息对网络用户和应急决策机构准确定位信息,精确把握事件发展态势至关重要。网络新闻突发事件信息抽取主要研究如何利用事件抽取技术从海量网络数据中抽取出人们所关注的突发事件信息,并构建事件模型将突发事件主题描述出来。本文围绕突发事件信息抽取,对文本分类、事件抽取和主题描述等相关技术进行了深入研究,论文的主要贡献如下:(1)深入研究了突发事件分类体系,根据突发事件类别体系结构的层次性特点,提出了一种基于领域特征词的突发事件层次分类方法。首先,将突发事件类别按照层次关系组织成虚拟类别树;然后,在虚拟类别树的每一层构建基于二叉树的SVM多类分类器,以类间距离之和大小指导二叉树生成,其中引入领域特征词概念,给出自动提取算法,并将其用于文本特征选择;最后,依照类别层次逐级往下分类。实验证明,基于领域特征词提取算法的特征选择方法优于传统方法,将层次分类方法应用于突发事件分类在降低时间复杂度的同时,改善了分类效果,有效降低了错误分类的风险。(2)针对传统基于触发词驱动的事件抽取方法在语料库规模较小时会出现正反例失衡和数据稀疏问题,提出了一种基于ISODATA聚类分析的事件抽取方法。该方法首先在事件语义模式的指导下构建特征模板,再利用最大熵模型识别事件实例;然后,给出基于多层特征融合的事件相似度计算方法,采用ISODATA聚类分析算法对事件进行聚类,并对ISODATA算法的分裂和合并处理进行了改进,以使其适用于非数值型样本聚类;最后,采用KNN分类算法确定每一类事件所属类别,完成事件抽取。实验证明,通过同一类事件推理验证,提高了对触发词类别关联性较弱和类别比较模糊的事件的分类能力,从而提升事件抽取的整体性能,并且算法具有自动发现未定义事件类别的能力。(3)为了更合理地描述突发事件主题,提高主题获取的效率,提出了一种基于事件框架的突发事件主题描述方法。首先,借鉴框架理论给出事件框架定义,在此基础上基于突发事件生命周期构建了突发事件框架;然后,在突发事件框架下将事件抽取技术和自动摘要技术相结合,给出了基于事件抽取的多文档自动摘要算法,用来抽取和组织事件主题,最终以摘要的形式完成主题描述。实验证明,该方法能够使用户在信息压缩的条件下获取突发事件的大部分主题信息,从而提高信息获取的效率,是一种有效的主题描述方法。
其他文献
随着我国经济的急速发展,我国城市规模迅速扩大,建成区用地急剧扩张。昔日的城乡结合部逐渐发展为城市的建成区,而一些城乡结合部的村落由于各种原因未被纳入发展规划之中,其
1970年11月25日,一位日本作家在陆上自卫队基地用军刀切腹自杀,他就是三岛由纪夫。三岛由纪夫是说不尽的,他的文学观、美学观、人生观极为复杂,引来诸多争议。无论生前还是死后,他
我们在测定某些饮料、口服液等食品时,发现凡添加蛋白糖而并未直接加入糖精钠的样品都含有糖精钠,且绝大多数超过国家卫生学标准。而蛋白糖系以阿斯巴甜(APM)为基料,配以其它食品添加
石油是国民经济的命脉,成品油销售是石油企业实现企业价值的一个重要环节。本文首先对陕西销售分公司市场环境及内部环境分析,找出了公司存在的主要问题,即运营油库多,一、二
土地利用,是人类有目的、有意识的通过一定的活动,利用土地的属性来满足自身需要的过程,是自然界与人类社会相互影响相互作用的产物。人类对土地的开发利用活动以及对土地的利用
作为微电子技术、嵌入式计算技术和无线通信技术快速发展的结晶,无线传感器网络成为了一种全新的信息获取与处理技术。无线传感器网络由大量传感器节点组成,通过多跳的无线通
随着MIMO技术在无线通信中的普遍应用,MIMO系统的物理层安全理论也受到了广泛关注。物理层安全是利用无线信道的多样性和时变性以及通信双方信道特征的唯一性和互易性,实现安全
万寿菊花瓣橙黄色,富含叶黄素,广泛应用于饲料行业,以改善动物品质。同时,叶黄素活性成分具有预防白内障、降低老年性视黄斑退化风险以及提高人体免疫力等生理功能,广泛应用
长期以来,对外汉语教学中的听力课一直采用的是单一的“听后理解”的教学模式。近年来,随着新的教学理论的输入,对外汉语教师探索出了一种全新的教学模式——“理解后听”。本文
永磁同步电机因其质量轻、体积小以及效率高等优点,已经广泛应用于工农业生产、日常生活、航空航天和国防等各个领域。因此,永磁同步电机控制系统的研究具有重要的实际意义。