面向生成对抗网络的深度伪造图像检测算法研究

来源 :西安理工大学 | 被引量 : 0次 | 上传用户:q115106962
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着深度学习技术的飞速发展,利用深度生成模型进行媒体伪造越来越普及,这些内容生成技术统称为深度伪造(Deepfake)。高质量的深度伪造图像人眼几乎无法辨别,如果用在科学研究、司法审判、新闻报道等领域,就会引起图像内容可信性问题,例如会误导公众、阻碍社会公平、干预政治事件等,带来难以挽回的危害。因此,研究如何鉴别深度伪造图像显得尤为迫切和重要。现有深度伪造图像检测方案存在准确率不够高、网络泛化能力不强等缺陷。本文利用深度学习技术研究面向生成对抗网络合成伪造图像的检测问题,提出了分别面向深度伪造与自然图像的分类和深度换脸图像的检测等问题的解决方案。本文的主要工作如下:(1)首先介绍了现有深度伪造检测技术的国内外研究发展状况,然后分析并总结了现有检测方法存在的问题,例如过度依赖GAN的网络架构、检测准确率不够高、面对未知生成模型泛化能力差等,最后以图文结合的形式详细阐述了本文主要的研究内容,描述了通用的深度伪造图像检测流程框架,从而为后续深度伪造图像检测算法研究奠定基础。(2)针对当前深度伪造图像检测方法准确率不够高的问题,本文提出了一种基于颜色与噪声感知的深度伪造检测算法(Color and Noise-aware Network,CNaNet)。通过分析自然图像的成像过程和GAN伪造图像的生成过程,利用两类图像在颜色和噪声两方面的差异性作为切入点,设计了双分支特征提取和融合网络。首先对图像进行一系列预处理操作,然后分别针对颜色分支和噪声分支训练了浅层卷积神经网络模型和VGG19模型,最后将两分支提取到的特征进行融合和分类。实验结果表明,本文提出的双分支融合网络的精度优于任何一个单分支网络的精度,分类准确率平均达到了 97%以上,高于现有几种代表性深度伪造检测方法。.(3)针对真实场景下现有算法对于GAN生成的低质量人脸伪造图像检测准确率低且泛化能力不足等问题,本文提出了一种端到端的基于多级预测与分组空间注意力的深度伪造检测算法(Multi-Stage Prediction and Grouped Spatial Attention,MSP-GSA)。由于待检测图像在真实场景中会受到各种传输或压缩处理,导致图像分辨率下降从而变得模糊,难以从中提取有效特征,因此现有方法对于低质量图像检测准确率普遍不高。本文研究面向真实场景下的深度换脸图像检测,算法网络模型的基础架构选用EfficientNet-B4来平衡参数数量、运行时间和分类性能,采用多级预测模块融合不同尺度的深层与浅层特征获取更加丰富的特征表达,并引入分组空间注意力机制对网络结构进行优化,用组空间中的整体信息来引导模型更好地学习到模糊图像中关键区域的特征,从而提高算法在真实场景下的检测能力。实验结果表明,本文提出的MSP-GSA在低质量换脸图像数据集上的准确率达到了 81.94%且AUC值达到了 83.16%,优于目前多种先进方法。同时,在包含多类伪造图像的数据集上进行实验,验证了本文方法MSP-GSA的泛化性。
其他文献
在城乡发展不平衡,乡村经济发展不充分问题日益严重的背景下,乡村振兴战略已全面实施,而发展乡村旅游与这一战略充分契合。依靠乡村地区特色旅游资源,发展乡村旅游有助于改善农村经济结构,进一步提升乡村区域人居与生态环境,同时还能有效推动资本、技术、信息、文化、管理等要素向乡村地区流动,优化城乡布局,加快城镇化进程。但是乡村公共基础设施落后,地方政府财政压力大,乡村区域引资难等问题严重制约我国乡村旅游发展。
学位
本文以引汉济渭南干线工程为研究背景,针对Q2黄土的强度、蠕变特性及其对隧洞围岩的放大效应、长期稳定性影响问题开展研究。通过查阅文献、室内试验及数值模拟等方法进行研究,进行了 Q2黄土的物理力学性质试验、直剪试验、单轴蠕变试验及扫描电镜试验,研究了其在干湿循环作用下的强度演化规律、蠕变特性及微观结构变化规律。基于FLAC3D数值软件,分析了 Q2黄土地层干湿循环作用下隧洞围岩压力的放大效应及隧洞长期
学位
随着经济高速发展和交通强国的建设,我国车辆和公路桥梁的总量在增加,相应的车辆-桥墩碰撞事故也在不断发生,对交通运营和生命安全造成巨大损失。因此,开展车辆撞击作用下桥梁损伤破坏分析,进一步提出抗撞设计方法,对保障我国城市交通安全和生命财产具有一定的工程价值和科学意义。基于精细化数值模拟,本文开展了车辆撞击作用下桥梁整体结构的破坏过程、动态响应和损伤破坏的研究工作,进一步建议了基于性能的抗撞设计方法。
学位
目的 应用网络药理学推测藤梨根的抗胃癌活性成分及作用机制。方法 以“mihoutaogen”作为关键词在中药系统药理学数据库与分析平台(TCMSP)进行查询,筛选藤梨根的主要活性成分和靶点;以“stomach cancer”为关键词在人类基因数据库(GeneCards)搜索疾病相关基因;通过String网站构建藤梨根抗胃癌的蛋白互作图(PPI);运用软件Cytoscape 3.6.0对核心靶点进行
期刊
柔性薄膜广泛应用于柔性传感器、有机光伏电池、航空航天、印刷包装等领域。在印刷制造中,主要承印基材是聚对苯二甲酸乙二醇酯(Polyethylene Terephthalate,简称PET膜),属于粘弹性薄膜材料。PET薄膜作为印刷电子中一种主要的承印基材,其所具有的粘弹性特性影响印品质量,因此不容忽视。各个领域对于印刷产品的精度要求日益严格,而印刷生产过程中薄膜的横向振动是影响印刷精度的重要因素。卷
学位
水是人类赖以生存和发展不可替代的自然资源,而水系作为支撑社会经济可持续发展的重要保障,在改善城市生态环境及提高人民生活水平中发挥着举足轻重的作用。随着国家战略“黄河流域生态保护和高质量发展”的实施,位于黄河中游的西安市在推动绿色发展上持续发力,不断开展河湖水系保护治理工作,成效斐然,随着水系功能的不断发挥,地区实现了社会、经济、生态效益共赢。因此在西安市水系保护治理工程规模逐步扩大和水利投资持续增
学位
随着“5G”通讯时代的快速推进,大量图像资源充斥于各类网络平台中,从而对图像检索效率和精度提出了更高的要求。如何针对大规模数据集提出一种模型适应性强、应用范围广的图像检索算法,已成为目前大幅提升图像检索效率与准确度的关键技术问题。因此,本文以图像检索系统为研究对象,展开基于增量学习的图像检索算法研究,旨在解决制约图像检索效率和精度提升的瓶颈问题,论文主要研究内容如下:提出了一种基于空洞卷积与深度散
学位
随着生鲜与医药等冷链市场的发展,包装行业需求面临着新的机遇与挑战。为了满足商品严格的运输条件以及运输距离增长的需求,包装行业开始重视商品运输包装的保温隔热性能,开发研制兼具力学性能与隔热性能的新型包装形式。本文研究并提出一种基于纸蜂窝作夹芯、其上下两侧为复合气凝胶毡的夹层板组成的纳米基气凝胶毡-纸蜂窝复合夹层结构,通过分析隔热机理研究,通过导热系数测试仪及静态加载实验,研究复合夹层板,结构的隔热性
学位
汉字的书写不仅是人类生活中不可或缺的行为,而且也是中华民族历史文化的重要传承。近年来,拥有自主书写能力的机器人逐渐成为机器人技术应用领域的研究热点。随着视觉技术的发展成熟和广泛应用,开发能够进行精确追踪,实时完成书写的机器人逐渐成为书写机器人领域的研究热点。该技术不仅适用于机器人的书写实验,还可以应用于文物鉴定,医疗康复和艺术绘画等领域。本文将机器视觉研究应用于机器人书写的实验当中,开发了一个利用
学位
废弃烟秆资源丰富,将其用于制备植物纤维复合材料能够产生可观的经济效益,在资源回收、保护环境、助力乡村振兴等方面也具有非常重要的现实意义。本论文以陕西地区烟秆(TSF)为纤维原料,对其韧皮部(烟皮)、木质部(烟骨)、髓部(烟芯)三种不同部位的纤维进行了纤维形态、化学成分、官能团、热稳定性等系统分析。并以三种纤维和聚丙烯(PP)为原料,通过熔融混炼、注塑成型的加工工艺,制备了不同部位TSF/PP复合材
学位