基于离群模型的异常大数据检测方法研究

来源 :新一代信息技术 | 被引量 : 0次 | 上传用户:pingzidege
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数据检测的主要目的是从海量的大数据中找出异常的数据.传统检测方法的好处是可以在数据预处理阶段减少噪声点对检测的影响,同时针对特定的场景进行异常检测能够对异常现象本身进行挖掘.但这种方法无法做到兼顾全局和局部离群数据同时存在的复杂检测.因此针对这一问题,提出一种新的基于离群模型的异常大数据检测方法,通过离散挖掘的方法对大数据进行挖掘,再建新的离散模型对异常大数据进行检测.通过对比试验将新的异常大数据检测方法与传统检测方法进行比较.结果表明,加入离群模型的检测方法能够充分兼顾全局和局部离群数据进行检测,明显提高了异常数据检测方法的查准率、查全率,可以更加有效地提升后续工作的效率.
其他文献
小学音乐是小学阶段的一门艺术学科,它可以陶冶学生的情操,提高学生的审美观,使学生得到身心的轻松。随着社会的进步与发展,教育界越来越重视学生的全面发展,而音乐作为培养
现今,各行各业对科学技术奖励越发重视,所获奖励已成为衡量企业、大学科技实力的重要体现.在科技奖励的评审环节,人为打分的方式无法准确、客观的反映各个项目的真实优劣.其
1999年5月-2007年12月,我们应用尺动脉腕上支皮瓣修复手掌、手背、小鱼际、大鱼际皮肤缺损26例,疗效满意.现分析报告如下.rn1 临床资料rn1.1 一般情况 26例中,男21例,女5例;
近年来多家医院都会对糖尿病患者进行治疗并提出治疗方案,针对这些医院的治疗方案和治疗效果进行综合的建模分析,并根据分析结果对医院提出合适可行的建议.问题一主要是根据
目的:观察氟比洛芬酯对颈椎术后麻醉苏醒期的安全性.方法:选择全身麻醉下行颈椎手术40例,随机分为观察组和对照组各20例.观察组在手术结束前30 min静脉注射氟比洛芬酯50 mg,
目的:观察常规加劳拉西泮治疗冠心病合并焦虑抑郁的疗效。方法:选择冠心病合并焦虑抑郁60例,随机分为常规治疗组(对照组)和常规加劳拉西泮组(观察组)各30例,分别采用汉密尔顿
成本会计概述r 成本是商品经济的价值范畴,是商品价值的组成部分。人们要进行生产活动或达到一定的目的,就必须耗费一定的资源(人力物力和财力),其所耗费的资源的货币表现及其对象
1病例报告患者女,32岁。因双眼无痛性视力下降1年余,加重1.5个月就诊。患者曾患系统性红斑狼疮(SLE)6年,持续口服氯喹、山海棠片和泼尼松片治疗,1年前出现视力下降,未予重视,
利用ELM和经过PSO算法的模型优化后进行数据对比,发现ELM-PSO的精度在ELM之上,所以利用ELM-PSO可在一定精度上完全反映真实数据的变化.通过对风机振动异常的分析和处理,说明
1998年6月~2008年2月,我们共收治胆胰管合流异常15例,疗效满意.现分析报告如下.