基于MapReduce的朴素贝叶斯算法在新闻分类中的应用

来源 :延边大学学报(自然科学版) | 被引量 : 0次 | 上传用户:pxh504705648
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对传统单点串行的分类算法在面对新闻数据规模较大、分类属性较多时存在效率低的问题,本文研究了朴素贝叶斯分类算法在MapReduce下的并行实现方法.首先对新闻信息进行分词、格式转换等预处理,然后进行特征提取、分类模型构造;最后进行了分类测试.测试结果表明,在大数据量的情况下,并行化的贝叶斯算法较传统的贝叶斯算法具有更好的执行效率和较高的扩展性.
其他文献
截至2013年底,中国共探明51个大气田,天然气储量持续高峰增长、产量快速上升、管网建设蓬勃发展、市场需求旺盛。总结2000年以来中国大气田勘探、开发的特征,可以为发现更多的大
通过试验研究,证明粉煤灰和磨细矿渣是合适的矿物掺合料,激发剂是粉煤灰和磨细矿渣活性激发的有效手段,复合掺加矿物掺合料可获得比单掺更好的效果。经过研究分析,指出经过原材料
阐述了建立状态维护系统的必要性,以及如何建立一套科学的状态维护系统,并通过实例说明所建系统的特性和应用效果。
介绍了基于Open GL ES的高真实感水面的绘制。场景的绘制采用Open GL ES 3.0渲染,包括逆向使用FFT模拟水面波动、光照、镜像倒影加强水面光影效果,以及扰动水面倒影贴图4个阶
玉米豆腐色泽金黄,口感软滑细嫩,含有人体所需的蛋白质、维生素、矿物质、胡萝卜素、不饱和脂肪酸等多种营养成分。玉米豆腐易于保存,在0℃~22℃条件下存放7天不会变质,真空保
<正> 近年来的中国文坛上,出现了一个令人不安的幽灵。它常常游荡在一些中篇新作之中。莫言的《透明的红萝卜》里,那小黑孩为什么老是不说话?那红萝卜为什么竟是透明的?他真
农业是上海不可或缺的基础性产业,低碳农业能够更好地发挥农业多功能性,即能更好地满足上海都市市民对农业农村的多种需求,又是上海乡村经济振兴、都市农业持续发展的必然选
通过对桐城歌宏观整体特征、内在元素和外在结构等音乐形态的分析,文章进一步认识到桐城歌“举世传诵,沁人心腑”艺术影响的形态之源。文章引入描述音乐(形态)学分析法的研究,为认
采用石墨炉一原子吸收分光光度法对郑州地区20个蔬菜品种268个样品的可食用部分中重金属元素镉的含量进行了监测,分析了各类蔬菜中镉的含量及其分布特征。结果表明:在监测的20
文章把由方言系统中吸收到现代汉语共同语系统的构词成分命名为移用词素。认为 ,汉语移用词素的形成既有可能也有必要 ,都有一定的语言基础和认识论基础 ,共同语从方言中移用