异常检测的动态代价敏感学习深度置信网络研究

来源 :南京财经大学 | 被引量 : 0次 | 上传用户:mddh9666
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大数据技术的发展,数据量不断扩大,源源不断的数据中很可能包括异常数据、欺诈数据等,这些数据会带来严重的影响,不仅会影响人们的生活、工作,而且会影响社会甚至国家的安全。故检测出异常数据、欺诈数据已经成为迫在眉睫的工作。这些数据都属于非平衡数据,非平衡数据是数据集中不同类别的数据数目相差很多,这些异常数据需要我们学习它们的特征并进行有效的预测。现有的非平衡数据处理方法有数据层面和算法层面的方法,数据层面的方法的弊端是当数据量增大时,处理所需的时间复杂度会呈倍数增长;算法层面的方法包括机器学习的方法、深度学习的方法和集成学习方法等。随着深度学习的发展,神经网络技术也逐步发展,在异常检测或者欺诈检测中,神经网络技术因其可以模拟人脑功能的基本特征,从而有着识别率高、稳定性好的特点。另外考虑到异常数据标签数据少以及人工标注的成本较高的特点,引入半监督学习的概念,半监督学习通过将无标签数据加入到有标签数据的训练中,从而提高分类器学习的性能。本文在此基础上对异常检测做出如下研究:(1)调研了异常检测技术国内外研究现状和发展趋势,对前人的研究成果进行了归纳和总结,对现有主要的异常检测算法的理论和方法进行了研究,总结了这些方法的不足之处。(2)提出了代价敏感的深度置信网络分类方法,用于解决异常检测中的数据不平衡问题,以及针对传统的DBN不能有效地解决非平衡数据的缺点从而引入代价敏感学习技术在softmax层添加误分类代价使得DBN对非平衡数据的分类具有敏感性,从而提高分类准确率。(3)针对第(2)点提出的代价敏感深度置信网络方法以及手动设置误分类代价的弊端,提出了动态代价敏感的深度置信网络方法。实验在多个公开的非平衡数据集上进行,采用ROC曲线作为分类模型评价指标,并与传统的非平衡处理算法进行比较,取得了较好的实验效果。(4)提出了融合半监督学习与动态代价敏感深度置信网络分类方法的算法,并将该算法应用到欺诈数据集中,通过在该数据集上进行实验并采用评价指标进行度量,该算法可以取得较好的实验结果。
其他文献
【摘要】作为一名农村教师,我上过很多课,也外出学习听过很多课。在课堂上,有的是教师滔滔不绝,学生鸦雀无声;有的是教师妙语连珠,学生笑声不断。可见,学生更喜欢快乐的、充满欢声笑语的课堂。可是很多老师认为还快乐给课堂,就等于给他们自由、放任的机会,就失去了师道尊严。多少年来,都是教师讲学生听的,课堂上师生你欢我乐,还像课堂吗?再说这样的课堂往往会出现一些意外,如果教师没有充满智慧的头脑,缺乏应急机制,
<正> ~~
超级电容器是一种新型的绿色大容量储能设备,其性能优于电池等传统储能方式,具有比容量高,充放电速度快,对环境无污染,使用寿命长等特点。因此,超级电容器具有很强的应用价值
【摘要】创新素养是核心素养的“核心”成分,当下数学课堂教学应重点关注学生创新素养的生成与提升,培育学生的创新素养应成为数学课堂教学的一个重要目的和一条基本原则。构建创新素养视域下的完整数学知识以及基于完整数学知识深度学习体系,是学生数学核心素养、创新素养生成、提升的必由之路。从深度学习走向深度教学,是教与学的一致性与相融性所决定的必然选择。  【关键词】课堂教学 创新素养 完整知识 学习体系 生成
【摘 要】根据乡村小学生学习英语的特点,在英语课堂教学中教师可以引入说唱的教学形式,既可以使课堂气氛活跃,学生的学习兴趣被调动,英语学习的难度又能够降低,教学效果得到提高。由于农村多媒体教学几乎全部覆盖,呈现说唱英语时教师可根据教学内容采用现代化教学手段,说唱英语时让学生模仿,让说唱英语在乡村小学英语课堂上得到有效应用。  【关键词】乡村小学英语;说唱;课堂教学;有效应用  【中图分类号】G623
随着智能终端的迅速进步,无线通信网络设施的不断提升,移动互联网实现了跨越性的发展,智能手机大范围普及成为互联网接入的最主要设备。人们在享受这种趋势带来的应用市场的
目的:本研究旨在观察高强度聚焦超声(high intensity focused ultrasound,HIFU)消融联合中药二期疗法治疗子宫腺肌病(adenomyosis,AM)的临床疗效,从而评估该疗法的有效性及安全性。方法:以2017年9月至2018年8月于成都中医药大学附属医院就诊,明确诊断为AM并在妇科海扶中心进行HIFU消融治疗的46例患者为研究对象,其中试验组26例予以HIFU联合中
“世界第一大工业展——2006汉诺威工业博览会(Hannover Messe2006)将于2006年4月24-28日德国汉诺威市隆重召开。2005年参展的中国企业共有321家,在德国以外参展国际展团中位居
目的比较两种不同方式培训社区网格员徒手心肺复苏效果的差异。方法医院急救培训小组对178名社区网格员分两组进行徒手心肺复苏培训,并比较两组学员培训前后效果以及两种培训
中药是防治疾病的重要工具,是提高疗效、发挥治病作用的主要部份,也是临床处方必不可缺的重要基础。因此如何正确地配伍应用,实属不能忽视的重要一环。中药配伍应用,从形式上
期刊