基于自编码器和对抗生成网络的信用卡欺诈检测

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:wzhi8
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的高速发展,在线支付成为人们日常生活中最常见的支付手段,而信用卡是当下最流行的在线支付手段之一,信用卡欺诈手段也逐渐变得多样化和复杂化,信用卡欺诈的原因也各不相同,有些人是为了从别人的信用卡账户中盗取资金,有些人则是为了使用别人的信用卡免费获得商品。信用卡欺诈每年会导致数以亿计美元的资金损失,因而设计一种有效的欺诈检测算法可以很好地帮住降低信用卡在使用过程中可能遇到的风险。以往的信用卡欺诈检测算法通常涉及数据挖掘和机器学习相关的技术,常见的有贝叶斯网络,逻辑回归,决策树,神经网络等,这些算法在此场景下都可以看作二分类的算法,它们对训练的数据往往有相对严苛的要求,即保证数据集中既有正常交易的样本数据,也有欺诈交易的样本数据,并且二者的样本数不能相差过大。但是在实际信用卡交易的数据集中正常交易数据的样本数要比欺诈交易数据的样本数多很多,也就是存在数据不平衡问题。不平衡的数据会导致常用的分类算法失去应有的效果,具体表现为算法只需要正确识别正常交易样本,而忽略欺诈交易样本就可以达到很好的精度,但这样训练得到的模型却无法很好地从交易数据中检测出欺诈交易。本文的工作是受kaggle上信用卡欺诈检测的比赛启发,比赛数据中欺诈交易样本只占整个数据集的0.17%,相对正常交易样本来说可以忽略不计,因而本文将信用卡欺诈检测问题拓展到单分类的场景进行研究,即训练数据只有正常交易样本的情况下,如何构建一个有效的信用卡欺诈模型。针对这种场景,本文尝试应用当下的深度学习方法来解决此问题,提出了一种结合自编码器和对抗生成网络的新算法用以检测交易数据中的欺诈样本,此算法可以看作单分类方法,属于无监督学习,只需要正常交易样本就可以很好地构建信用卡欺诈检测的模型,因而很好的解决了欺诈交易样本过少甚至没有的情况。本文的主要工作如下:(1)提出基于自编码器(Autoencoder)的特征提取方法,通过实验证明使用(稀疏)自编码器提取的关键特征能够更好地帮助模型学习得到正常交易样本和欺诈交易样本之间的边界。(2)提出基于对抗生成网络(Generative Adversarial Network)的信用卡欺诈检测模型。将(稀疏)自编码器提取的关键特征作为对抗生成网络的输入,用以训练对抗生成网络。在训练过程中,优化得到能正确识别正常交易样本和欺诈交易样本的判别器,最终将训练好的(稀疏)自编码器和对抗生成网络的判别器组合得到信用卡欺诈检测的模型。实验结果表明此模型相比当下的单分类的方法在信用卡欺诈检测中表现出更好的性能。(3)提出改进的信用卡欺诈检测模型,实验过程中我们发现使用原始对抗生成网络的训练时间相对较长,且最终结果依然存在不稳定的情况,因而本文对模型进一步改进,通过将生成器的生成目标从生成正常交易样本转变为生成欺诈交易样本,更好地帮助判别器学习正常交易样本和欺诈交易样本的边界,从而更好地识别欺诈交易。(4)将本文提出的算法拓展到垃圾新闻检测的场景,通过在新闻数据集上的实验对比证明本文算法在相似问题上的适用性。
其他文献
主要对古建元素进行了深入的诠释,分析了古建元素在公益广告中的功能和意义。探讨目前各设计领域是如何使用中国古建形象,出现的形式和问题。论证了古建元素的公益广告不仅是
《国家中长期教育改革和发展规划纲要(2010—2020年)》是指导高校教育改革与发展的纲领性文件。各高校必须把它作为行动指南,认真贯彻落实,把纲要中对高等教育改革与发展的新要
随着我国经济的快速发展,城市化进程加快,使得房屋建筑工程日益增多,然而,人们对房屋建筑施工也提出了更高的要求。因此,在房屋建筑外墙保温施工中要求相关施工人员进行更深层次的
目前,霉菌毒素污染谷物食品和奶制品的现象较为普遍,黄曲霉毒素M1(AFM1)和赭曲霉毒素A(OTA)是奶及奶制品中常见的两种霉菌毒素,玉米赤霉烯酮(ZEA)是玉米及其它谷物中污染最为
党的十八大以来,党中央和地方各级政府高度重视营商环境的优化,为打造国际化、法治化和便利化的营商环境,作出一系列关于营商环境优化、提高国际竞争力的重大部署。长期以来,在政府与市场的协同合作下,黑龙江省哈尔滨市投资发展环境正在日益优化。但“放管服”改革不到位,部分政府官员不作为,营商经济压力大,相关政策落实不到位,政务服务法制化水平有待提高等问题仍在一定程度上限制了哈尔滨市营商环境优化效果,营商环境优
现代国际恐怖主义犯罪的演进,呈现为“冷战”恐怖主义、“多元”恐怖主义、“极端宗教”恐怖主义三个阶段,具有相应的不同特点。当代国际社会在法治反恐领域面临恐怖主义概念
非公开定向债务融资工具(PPN)是银行间市场交易商协会于2011年推出的企业债务融资工具,随着相关制度和政策的不断完善,于近几年得到快速发展。文章从PPN的投资人范围、市场流
当前,中国农业农村不仅面临既要“温饱”又要“环保”的两难困境,而且还面临既要解决绝对贫困又要解决相对贫困的双重问题。“绿色减贫”是当前扶贫工作起承转合的新发展方式
随着经济社会和房产市场的发展,越来越多的年轻人、工薪阶层选择购入小户型入住.但其较小的面积往往给空间布局带来较大难度,除了具备基本的功能性需求外,我们还可以利用设计
从教学及实践的角度出发,就双代号网络图的绘制方法与技巧进行了归纳总结,以便在绘图时能很好地控制整个图形的布局,正确清楚地表达逻辑关系,快速准确地绘出双代号网络图.