多关键帧特征交互的人脸篡改视频检测

来源 :中国图象图形学报 | 被引量 : 0次 | 上传用户:luoxueyan191
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目的 深度伪造是新兴的一种使用深度学习手段对图像和视频进行篡改的技术,其中针对人脸视频进行的篡改对社会和个人有着巨大的威胁.目前,利用时序或多帧信息的检测方法仍处于初级研究阶段,同时现有工作往往忽视了从视频中提取帧的方式对检测的意义和效率的问题.针对人脸交换篡改视频提出了一个在多个关键帧中进行帧上特征提取与帧间交互的高效检测框架.方法 从视频流直接提取一定数量的关键帧,避免了帧间解码的过程;使用卷积神经网络将样本中单帧人脸图像映射到统一的特征空间;利用多层基于自注意力机制的编码单元与线性和非线性的变换,使得每帧特征能够聚合其他帧的信息进行学习与更新,并提取篡改帧图像在特征空间中的异常信息;使用额外的指示器聚合全局信息,作出最终的检测判决.结果 所提框架在FaceForensics++的3个人脸交换数据集上的检测准确率均达到96.79%以上;在Celeb-DF数据集的识别准确率达到了99.61%.在检测耗时上的对比实验也证实了使用关键帧作为样本对检测效率的提升以及本文所提检测框架的高效性.结论 本文所提出的针对人脸交换篡改视频的检测框架通过提取关键帧减少视频级检测中的计算成本和时间消耗,使用卷积神经网络将每帧的人脸图像映射到特征空间,并利用基于自注意力的帧间交互学习机制,使得每帧特征之间可以相互关注,学习到有判别性的信息,使得检测结果更加准确,整体检测过程更高效.
其他文献
建立了一种方便、快捷的高效液相色谱法(High Performance Liquid Chromatography,HPLC)测定卤肉制品中日落黄含量检测方法.试样中的日落黄经80℃水浴30 min提取,定容过滤后经液相色谱分离,480 nm波长下紫外检测器检测.结果 表明本方法在0.05~5.00μg/mL线性良好,相关系数大于0.999,加标回收率为81.0% ~93.8%,相对标准偏差为1.21% ~2.51%,检出限为0.5 mg/kg.经验证,本方法方便、快捷、重现性好、实用性高、包容性大,检测
随着人们生活水平的不断提升,人们更加注重食品的质量,如果无法保障食品安全,人们的身体健康会受到威胁.本文对食品工程安全保障与监督管理策略进行分析,以期为相关工作的开展提供借鉴意义.
随着人们生活水平的提升,对于衣食住行也有了更高的要求,其中食品安全问题已经成为当前社会广泛关注的一个重点.而食品安全风险分析已经是当下国际公认的食品安全管理手段,对于保障消费者的合法权益,促进我国食品安全和生产管理有着非常重要的作用.基于此,本文将结合当前我国食品安全风险分析的现状及其作用对食品质量管理工作的应用进行相应的阐述,为促进我国食品安全管理工作的进行提供一些针对性意见,为广大学者提供借鉴.
HACCP体系作为国际上共同认可并接受的食品安全保证体系,其应用作用是对食品中潜在的微生物、化学及物理危害进行准确的安全质量控制.在HACCP体系的不断发展与应用下,HACCP体系以预防食品安全危害为基础,凝聚着食品安全生产与质量控制为一体的保障体系,确保各类食品在生产加工时能够及时发现问题.现阶段,HACCP体系的应用成效显而易见,对我国食品安全卫生的质量保障有着不可缺失的重要作用.基于此,本文就以HACCP体系在早餐肉松加工和质量控制中的应用展开深入的分析.
单目深度估计是从单幅图像中获取场景深度信息的重要技术,在智能汽车和机器人定位等领域应用广泛,具有重要的研究价值.随着深度学习技术的发展,涌现出许多基于深度学习的单目深度估计研究,单目深度估计性能也取得了很大进展.本文按照单目深度估计模型采用的训练数据的类型,从3个方面综述了近年来基于深度学习的单目深度估计方法:基于单图像训练的模型、基于多图像训练的模型和基于辅助信息优化训练的单目深度估计模型.同时,本文在综述了单目深度估计研究常用数据集和性能指标基础上,对经典的单目深度估计模型进行了性能比较分析.以单幅图
目的 由于空域图像下采样过程中提供的量化误差边信息能够有效提升隐写安全性,为了得到下采样之前的高分辨率图像,提出一种基于超分辨率网络的空域图像边信息估计隐写方法.方法 受原始下采样边信息隐写方法的启发,使用超分辨率网络生成被称为预载体的高分辨率图像.同时利用现有的空域图像对称失真算法得到每个像素点的修改失真,然后以浮点型精度对预载体下采样,得到和载体同分辨率的图像形式,利用对应像素点间的差值指导像素点的修改方向,实现基于初始失真的非对称失真调整.首先以峰值信噪比和极性估计准确率为指标对比了多种超分辨率网络
农贸市场是农产品流通和消费者购买食材的主要场所之一,农贸市场的食品安全性与人们的健康相关.农贸市场的食品安全监管工作存在一定的缺失,市场秩序较为混乱,出现了较多的食品安全问题,如滥用添加剂等,引起了社会各界的广泛关注,做好农贸市场的食品安全监管工作非常重要.基于此,本文分析了农贸市场食品安全监管存在的问题,并阐述了解决策略,以期为提高农贸市场的食品安全监管水平提供参考.
(简讯 范庆伟 朱有刚)日前,山东省栖霞市市场监管局在烟台开发区鑫源绿环再生资源股份有限公司组织开展了全市“农村假冒伪劣食品专项执法行动罚没物品集中销毁现场会”.
期刊
目的 传统Krawtchouk变换处理图像时存在变换域信息表示单一、不可调节等问题,传统分数阶Krawt-chouk变换处理实信号表示有冗余等问题.为了构造更加灵活的图像变换域表示,提出了实离散分数阶Krawt-chouk变换,并应用于数字图像水印.方法 利用对传统Krawtchouk变换矩阵特征值分解的方式,通过对分解后的特征值矩阵的实矩阵分数化构造得到了实离散分数阶Krawtchouk变换的变换矩阵,从而构造出实离散分数阶Krawtchouk变换.然后,利用所提变换从实数域变换到实数域这一特性,提出了
目的 本征图像分解是计算视觉和图形学领域的一个基本问题,旨在将图像中场景的纹理和光照成分分离开来.基于深度学习的本征图像分解方法受限于现有的数据集,存在分解结果过度平滑、在真实数据泛化能力较差等问题.方法 首先设计基于图卷积的模块,显式地考虑图像中的非局部信息.同时,为了使训练的网络可以处理更复杂的光照情况,渲染了高质量的合成数据集.此外,引入了一个基于神经网络的反照率图像优化模块,提升获得的反照率图像的局部平滑性.结果 将不同方法在所提的数据集上训练,相比之前合成数据集CGIntrinsics进行训练的