基于加权引文的贝叶斯分类研究

来源 :南京大学 | 被引量 : 0次 | 上传用户:wangle2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
文本分类技术是信息检索和文本挖掘的重要基础,其主要任务是在预先给定的类别标记(1abel)集合下,根据文本内容判定它的类别1。通过文本自动分类,系统能够对信息进行有效的管理,提供便捷的信息服务。朴素贝叶斯能够快速高效的完成分类任务,且能够很好的进行增量变化,这使得其在基于自动分类的服务系统中受到广泛应用。在学术文献中,存在着大量的引用文献,通过其形成的引用网络能够获得许多原文献中缺少的信息,利用引用网络和引文可以有效的改善分类效果。将引文网络以及引文域与贝叶斯算法相结合,可以构建高效的分类器为学术研究提供信息服务。本文主要工作如下:1、本文系统地介绍了文本自动分类的一般流程。之后详细分析了贝叶斯的基础理论模型,总结分析得出朴素贝叶斯对于属性特征的敏感性,即其受到噪声的影响较大。因此特征选择对于朴素贝叶斯分类十分重要。在其基础上对不同改进模型的研究现状与性能优缺点进行了系统综述。贝叶斯主要改进模型通常称为半朴素贝叶斯分类,该类模型能够更好地满足朴素贝叶斯的词项独立性假设,却会在一定程度上提高时间复杂度,在使用中需要根据不同需求选择不同模型。其主要分为z-依赖分类器、有效特征子集、加权贝叶斯三种改进方式。之后本文对包括引用网络在内的各种网状数据分类方法进行了较为全面的解读。2、本文参考网状结构数据分类的理论与应用成果提出利用引用关系、引文域词项特征及不同域加权对分类方法进行改进。此外,本文利用学术文献引用中存在的部分引文多次被施引文献引用的现象,利用引用频次对引用关系和引文域词项进行加权,以帮助更好的分类。基于该思路,本文设计了4个实验,得到了如下结论:(1)引文信息可以提升学术文献分类的效果。单独使用引用信息(引用关系、引文域词项)的分类效果在准确率和召回率指标上低于传统分类器;基于引文域词项的分类器与正文分类器相结合可以有效提高分类效果。(2)对题名(title)、摘要(abstract)、正文(body)、引文(reference)题录词项赋予4:2:1:2的权重在众多加权方案中可以获得最优的分类效果。(3)引文特征在训练集选取较少的情况下对引文与正文分别建模的分类器准确率提升的效果更为突出。在多项式、贝叶斯网络以及多元伯努利模型等三个分类器中,后者结合引文域词项特征的表现最好。(4)不同分类模型的分类效果存在差异。在召回率指标上,基于文本域加权的WNB分类器表现最优;在准确率指标上,引文域与正文词项相结合的(CTNB)分类器准确率提升更为明显;综合准确率和召回率指标,CTNB的分类效果更值得期待。(5)引文特征对内聚性不同类簇的影响。引用关系特征在准确率指标上对内聚性强的类簇有积极影响,而对召回率指标的影响则相反;反之,引用关系特征在准确率指标上对耦合性强的类簇有积极影响,而对召回率指标的影响则相反;引文域词项分类器整体优于引用关系分类器。
其他文献
咖啡酸(Caffeic acid, CA),化学名为:3-(3,4-二羟苯基)-2-丙烯酸,属于酚酸类化合物,广泛分布于小蓟、金银花、杜仲、牛至、茵陈、蒲公英等多种药用植物中。现代药理学研究表明
山西民俗文化资源丰富厚重,具有四大特点:一、具有多民族融合、多元文化兼容并蓄的特色;二、具有浓郁的农耕文化特色;三、具有持重、节俭、尊崇礼仪、讲求信义的性格特征;四
目的提高车辆导航精度.方法建立加速度计与里程计组合导航模型,给出相应算法及GPS校正里程计刻度因子的方法.结果车辆运行在短时间内用加速度计与里程计组合校正里程计刻度因子,长时
对南京地铁柔性接触网一次雷击事故进行分析,计算了柔性接触网的雷击风险和雷击参数,在此基础上提出了综合防雷措施,主要包括:安装架空地线、接地、安装地电位均衡器、安装带
<正> 伦敦大英博物馆馆长麦·葛瑞格说,每个国家的博物馆都有"保留过去,呈现未来"的使命。按照联合国教科文组织衡量一个国家文明程度的标准,博物馆的数量和形式的丰富程度是
软交换网络是近年来全球通信产业发展的焦点,它关系到未来整个通信信息网的构架。当前通信业进入深度调整时期,如何利用新技术提高网络资源的利用率、快速开发新业务、降低网
植物采用多种机制对生物和非生物逆境做出适应性反应。在植物与环境的相互作用研究中,人们越来越关注植物基因在转录水平上的调控,对转录因子的研究已成为现今植物基因研究的
本论文选取硅基有序介孔SBA-15为研究对象,内容主要包括以下几方面:一、研究表面活性剂配比、干燥方法、搅拌与静置、不同硅源等因素在合成过程中对SBA-15形貌及比表面积等的
随着人类对电力能源的重视与不断应用,电力设施与设备已经与现代人类的工作与生活紧密结合,电力甚至成为现代各行各业发展的基础前提。但不可否认的是,由于种种原因,电力能源
近年来,空间文化得到了很大程度的发展变化,人们对空间的关注和理解也产生了很大不同。空间的这种发展变化在各种艺术中都得到了不同程度的表现,由于都市剧本身内容更具生活