基于MapReduce的朴素贝叶斯算法文本分类方法

来源 :武汉工程大学学报 | 被引量 : 0次 | 上传用户:deqiangranran
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为了解决传统串行朴素贝叶斯算法分类性能低下的问题,提出一种基于朴素贝叶斯算法的并行化分类方法。选取多项式朴素贝叶斯,搭建Hadoop集群,通过卡方检验选取特征词,利用词频-逆文本频率指数方法计算出每个特征项的权值,并求出每类的权重总和,将权值应用到朴素贝叶斯公式中得到分类结果。实验结果表明:在该集群上设计的并行化朴素贝叶斯分类方法较比传统朴素贝叶斯方法,其精确率,召回率,F1值分别至少提高了7.66%,7.56%,11.98%,且用时更短,说明本文的方法能够提高处理文本的时间效率。
其他文献
对一株命名为st10新产ε-聚赖氨酸菌株(ε-Polylysine)进行测序,产物鉴定,及用响应面法确定了该菌株的最优摇瓶发酵配方。对st10菌株的16s rRNA比对确定该菌株属于白色链霉菌
本文综述了高通量测序技术在感染性疾病中病原体鉴定、耐药基因组检测、毒力分析中的应用情况,具体论述了对典型或非典型病原体的识别以及对新发未知感染的快速识别、流感病
自旋交叉配合物[Fe(Htrz)2(trz)](BF4)在室温附近表现出较宽的温度磁滞现象,在光热开光、信息显示以及数据存储等方面具有潜在的应用,是目前自旋交叉领域最值得关注的配合物
低临界溶解温度(LCST)型聚合物因其独特的温度响应特性而在众多领域具有广泛的应用,其响应温度与聚合物结构密切相关。通过分子设计和改造,可以将LCST型聚合物的响应温度调节
季铵盐类聚合物由于具有正电荷,可以通过静电作用吸附于细菌细胞膜,破坏细菌细胞膜结构,因而在抗菌方面具有独特应用。近年来,将季铵盐类聚合物与纳米抗菌材料结合以提高材料
为清晰地展示城市更新的研究现状,借助CiteSpace软件对中国知网近6年来(2014-2019年)中文核心期刊中“城市更新”研究文献进行搜集整理和可视化分析,以图谱的形式较直观地展
为了完善协同开采的理论体系,梳理协同开采理念应用分类,笔者通过查找协同开采相关文献并归纳分析,追溯了理念的起源,清晰了现有的协同开采概念内涵,深入归纳为空间协同、资
低掺量水泥固化高含水率黏土(HW-CSC)作为围海垦地填料,工程应用前景广阔。本文通过室内试验,测试不同配合比下HW-CSC试样的无侧限抗压强度,分析水泥质量分数(wc)、含水率(ww
针对非常规油气田开采中产能持续降低导致分离失效的问题,设计一种新型多管旋流装置,采用数值模拟方法,对比研究单管和多管旋流装置分离性能。研究表明:多管旋流装置压降率较
运用ABAQUS软件研究管幕群中相邻顶管对顶管顶推力的影响。基于港珠澳大桥的拱北隧道工程,选取隧道暗挖段管幕群顶部、中部、底部顶管作为研究对象,分析相邻顶管对顶管顶推力