【摘 要】
:
近年来出现并迅猛发展的深度伪造(DeepFake)技术深刻改变了多媒体内容伪造的方式和水平,给网络空间内容安全带来了新的严峻挑战。本文主要关注深度伪造中典型且危害大的视频换脸伪造,分别提出基于I3D(Inception3D)网络的眼部与口部双流检测方法与加入Mix Up数据增强的检测方法,主要研究内容如下:(1)针对现有大多数伪造检测方法忽略了视频中重要的时间信息的问题,将目前常用的仅具备空域感受
论文部分内容阅读
近年来出现并迅猛发展的深度伪造(DeepFake)技术深刻改变了多媒体内容伪造的方式和水平,给网络空间内容安全带来了新的严峻挑战。本文主要关注深度伪造中典型且危害大的视频换脸伪造,分别提出基于I3D(Inception3D)网络的眼部与口部双流检测方法与加入Mix Up数据增强的检测方法,主要研究内容如下:(1)针对现有大多数伪造检测方法忽略了视频中重要的时间信息的问题,将目前常用的仅具备空域感受能力的2D卷积拓展为I3D卷积,赋予网络同时感受空域和时域信息的能力。同时,通过调整I3D网络结构使其从原有的多分类任务设计改进为更适合换脸取证二分类任务的高效网络。进一步,考虑到视频换脸操作中眼部和口部区域伪造难度更大也更容易留下篡改痕迹的特点,提出基于这两个区域的双流网络结构,最终利用双流输出结果实现协同决策。通过在Celeb-DF、DFDC、Deep Fake Detection、Face Forensics++等目前常用数据集上的广泛实验,结果表明本文提出的方法在检测准确性和效率上较目前最先进的Xception和标准I3D网络均得到显著提升。(2)针对现有算法跨数据集性能较差的问题,本文提出了利用Mix Up数据增强算法对模型通用性进行改进的方法。通过分析经验风险最小化原则的原理,揭示现有算法通过增加网络复杂度来提升检测准确率的方法会导致网络泛化性能差、容易出现过拟合的问题,而Mix Up可通过拓展训练分布来改善网络性能,提升网络鲁棒性。进一步,本文通过将检测模型改造为端到端的网络,降低算法中人为操作的占比,使模型通过Mix Up数据自动学习特征提取和分类器,以实现检测效率的提升,并通过实验验证其有效性,确定Mix Up参数对网络的影响。在Face Forensics++数据集上训练的模型,在Celeb-DF、DFDC、Deep Fake Detection三个常用数据集上进行测试,结果表明MixUp算法对于提升跨数据集性能的有效性。
其他文献
研究目的本研究旨在观察种植体周围组织不同健康状况下种植体相关临床指标(牙龈指数、改良菌斑指数、改良龈沟出血指数、探诊深度和骨吸收量)的变化以及龈沟液(Gingival crevicular fluid,GCF)微生物菌落的丰富度和多样性。研究方法严格参照本研究纳入标准和排除标准,选择种植治疗并完成冠修复的患者作为研究对象,共收集43名志愿者的65颗种植体。根据国际口腔种植体健康情况分级标准将种植体
水下可见光通信(Underwater Visible Light Communication,UVLC)是一种利用光波作为载体在水下介质中进行信息传输的技术。与传统的水声通信和射频通信相比,UVLC具有污染小、安全性高、时延低、传输速率快等优点。然而,光束在水下环境中进行信息传输时会受到水体吸收、散射和湍流的影响,导致系统传输效率降低。针对水下可见光高速数据传输过程中信号受衰减和衰落问题,本文对可
随着无线通信高速发展,UHF频段的车载天线已广泛应用于军事和民用领域。由于军用车载天线的特殊性,时常会面对一些复杂的地理环境,这就对天线电性能提出了更高的要求,因此具有高增益和宽频带的车载天线成为了研究的热点。本文针对实际工程需求,对基于渐变结构和耦合馈电形式的车载天线及阵列进行了宽带化、高增益理论研究和实验验证。设计了两款UHF频段的全向高增益车载天线。主要研究内容和结论如下:(1)全向宽带车载
古代哲学“诸子”思想史在很大程度上倚赖早期史书的记述,其中,司马迁的《史记》至为重要,它提供了一系列篇幅不一的战国思想家传记。然而,在这些叙述中,个人的生平、思想和著述交织混杂,方式多样而不均衡,并不构成了解中国早期思想与思想家的可靠导览。《史记》对不同思想家的处理是有选择性的,大量文本遗产未在其中获得充分呈现,但是,它发展了几种独特的作者模式,包括文本素材库的匿名汇编模式,以及因困厄不得志而发愤
径向线缝隙天线(Radial Line Slot Antennas,RLSA)具有高增益、低剖面、高效率和易于集成等优良性能,被广泛应用于船载、机载和卫星等场合中。设计这种天线的主要工作在于如何排布径向线缝隙天线的缝隙使得天线的性能最佳。为了指导这些缝隙的排布,已有文献采用基于常规矩形波导缝隙天线的模型研究这些缝隙的排布问题。常规矩形波导缝隙天线的模型忽略了场的扩散以及圆周方向缝隙间的耦合,而本文
近年来,我国物流行业蓬勃发展,公路运输愈加频繁,由此造成的货运事故率居高不下,运输过程中的安全问题成为了亟待解决的热点问题。据统计,75%的车祸事故由驾驶员的不当操作引起,因此,研究驾驶员行为对保障车辆驾驶安全与运输安全具有重要意义。本文基于商用车联网大数据,运用数据挖掘技术,挖掘大数据背后的驾驶规律,分析驾驶员的驾驶行为,研究商用车辆驾驶风险辨识,建立安全性量化评价体系。主要内容如下:(1)商用
压缩感知(Compressed Sensing,CS)是对过往的信号采集理论的一个突破,由于CS技术在数据传输和存储时的优势,该领域已经有许多潜在应用研究。近年来,深度学习飞速发展,已经在图像去噪、超分辨重建、压缩感知等图像重建领域取得显著成果。基于深度网络的方法虽然避免了表示误差的累积,但随之而来的是网络模型对图像结构的可解释性差,重建图像中细节容易丢失,特别是在低采样率下,局部结构和纹理重建效
Ga2O3作为新一代宽禁带半导体材料,具有高达4.9 e V的禁带宽度,超宽带隙使Ga2O3表现出波长低至250 nm的深紫外透射特性,因此可以制作短波长光电器件。In2O3的禁带宽度一般小于3.7 e V,与Ga2O3形成间接带隙的三元合金半导体材料。通过改变合金材料中Ga与In的含量,可以实现材料的带隙在3.7~4.9 e V之间可调制的特性。另外,稀土离子具有良好的发光特性,为了实现高效的室
电磁超表面(Metasurface)是一种人工设计的亚波长结构,其能够表现出优异的控制电磁波的能力,通过设计和改变超表面的单元结构、周期排列可以控制其电磁性能,设计出自然界中的材料不具备的电磁特性,从而实现工程应用。尽管超表面已经被提出和研究了几十年,但由于它在控制电磁波方面,特别是在电磁波的吸波、偏振方面的显著优势,其依然受广大科学家和工程师的关注。本文对多频带和可调谐超表面吸波器件展开研究,具
本文研究Volterra积分方程的Galerkin Legendre Jacobi数值积分法.进一步,将该方法应用于源项具有固定间断点的Volterra积分方程和第三类Volterra积分方程的计算.对变系数Volterra积分微分方程,基于Legendre tau方法,设计Legendre谱Galerkin数值积分方法;还利用最小二乘方法,给出Legendre谱Galerkin最小二乘数值积分法