PODKNN:面向大数据集的并行离群点检测算法

来源 :计算机科学 | 被引量 : 0次 | 上传用户:xin22431
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对现有离群点检测算法在运用于大规模数据集时时间效率较低的问题,提出一种基于K近邻的并行离群点检测算法PODKNN(Parallel Outlier Detection Based on K-nearest Neighborhood)。该算法利用划分策略对数据集进行预处理,在规模较小的子集中寻找K近邻并计算离群度,最后合并结果并遴选出离群点,设计算法过程使其符合MapReduce的编程模型,实现并行化,从而提高了离群点检测算法处理大规模数据的计算效率。实验结果表明,PODKNN具有较高的加速比及较好的扩展
其他文献
进入新世纪以来,青浦的教育事业取得了长足进步。面对成果,青浦教育如何在科学发展观指引下,实现优质、全面、可持续发展,是摆在每个青浦教育工作者面前的重要课题。今年,适
以中国上市企业2007—2013年的数据为基础,实证分析了CEO权力对创新绩效的影响、产权性质对创新绩效——CEO权力敏感性的影响。实证结果表明,产权性质会显著影响创新绩效与CE
银发旅游是当今老龄化社会中进行旅游开发的重要部分,在人口迅速老龄化的市场条件下,开发银发旅游具有重要意义。首先,从旅游资源、旅游市场和旅游基础条件三个方面对大连市
全球经济一体化的加快和世界各国经济合作的扩大,使外贸在国民经济中所占份额加大。而发展外贸,首先需要关注外贸商品的商标。商标是商品显著特征的浓缩,是商品文化的核心部
结合广东省标准《锤击式预应力混凝土管桩基础技术规程》的修订,对抗拔管桩单桩竖向抗拔承载力的确定以及抗拔管桩的结构构造包括桩身结构、接头、桩头与承台的连接作了较详细
佛教产源于印度。西汉哀帝元寿元年即公元前 2年 ,佛教始传入中国。真正影响中国医学的是佛经。主要表现在佛经对中医辨证理论的影响 ,佛经对中药品种、认识的丰富 ,佛经治疗
<正>在日前闭幕的青浦教改实验30年纪念大会上,中国教育学会会长顾明远教授再次高度评价了这个农村教改的实验典型,认为这是我国教育改革中难能可贵的正确选择和有效经验。"
<正>一、教材依据教材选自人民音乐出版社义务教育九年一贯制音乐教科书第四册(二年级)第6课《愉快的劳动》二、设计思想创设宽松的氛围、乐学的氛围,使二年级学生在实践中、
为了在有限的土地上获得更高的效益,我们在京郊怀柔县宝山寺乡杨树下村20亩(667米2)葡萄园内搞了葡萄行间种土豆,土豆收后种黄瓜的高产、高效种植模式,667米2获纯利2700元。一、种植方式在5年生的