基于深度学习的图像篡改区域定位算法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:alexiss
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
相比文字,数字图像更具有生动性和趣味性,体现出更强大表现力,逐渐成为互联网上获取信息的重要媒介之一。随着数字图像编辑软件的发展和普及,不具备专业图像处理知识的人也能够便捷地对图像的内容进行随意改动,使用的篡改手段也多种多样,给图像篡改区域定位任务带来了前所未有的挑战。目前,大部分传统的图像篡改区域定位算法利用统计学方法提取特征,很难反映图像丰富的语义信息,具有较大的局限性。同时,基于深度学习的图像篡改区域定位模型普遍存在预测结果精细度不足、训练难度大和计算资源消耗大等问题。此外,在实际应用场景中,篡改图像通常经过一种或多种后处理操作,导致模型定位性能并不理想。因此,本文对图像篡改区域定位技术进行了深入研究,主要研究工作如下:(1)针对传统篡改区域定位算法存在细节信息缺失问题,本文提出一种基于改进型高分辨率网络的篡改区域定位模型。该模型利用动态上下文机制提高特征学习能力,引入基于拉普拉斯算子的边缘监督分支对模型结构加以改善,鼓励预测结果和标签掩模图具有相近边缘梯度,在定位大尺度篡改区域场景下效果显著。(2)考虑到篡改区域尺度具有多样性特点,本文提出了一种新颖的基于多尺度视觉Transformer的篡改区域定位模型。该模型将图像划分为不同粒度的非重叠块,通过视觉Transformer结构对图像块序列的相关性进行建模,使用纵横注意力机制提高模型对篡改痕迹的关注度。实验结果表明,所提出模型有效提高图像篡改区域定位的准确度。(3)为了兼顾模型的准确度和计算效率,本文提出了一种双流的轻量级U型网络。精简研究内容(2)所提出框架,搭建轻量级网络,降低计算资源消耗。而且,考虑到篡改区域与真实区域噪声分布差异,使用SRM模型提取噪声流作为辅助分支,通过门控通道转换单元解决双流特征筛选问题,尽可能减少模型精度损失。(4)基于以上所提出的三个模型,本文设计并实现了一个图像篡改区域定位系统,该系统主要提供模型训练和预测结果可视化功能,帮助用户轻松发现图像篡改区域。
其他文献
随着深度学习方法及其目标检测方法的飞速发展,它们的应用范围越来越大,特别是在水下目标检测、海洋环境探索、水底生态保护、渔业养殖辅助等方面正在发挥着越来越重要的作用。但是,由于水下环境比起陆地上的环境要复杂很多,光在水中传输时又会受到水的吸收、反射和散射等影响而发生严重的衰减,因此采集到的水下图像难免会出现可见范围有限、模糊不清、色彩不协调及噪声等各种问题。另外一方面,由于水下生物数量和种类繁多,部
学位
类皮肤传感器由于具有良好的导电性和稳定性,使得它在柔性传感器件领域具有非常广阔的应用前景。然而,这些类皮肤传感器在日常使用过程中会经历多次的拉伸、弯曲和压缩,这会对类皮肤传感器产生机械损伤。这些损伤会破坏类皮肤传感器的结构和机械完整性,导致传感功能的丧失、降低它们的使用寿命。所以,赋予类皮肤传感器自修复及可循环利用性是解决该问题的最有效的方法之一。此外,类皮肤传感器还应具有优异的力学性能,如高强度
学位
蜱传脑炎(Tick-borne encephalitis,TBE)又称森林脑炎,是由蜱传脑炎病毒(Tick-borne encephalitis virus,TBEV)引起的以神经系统病变为主的自然疫源性疾病,可在人与动物中引起致死性脑炎并伴有长期的后遗症,严重威胁人类健康和公共卫生安全。近年来随着全球气候变化,传播病毒的媒介蜱的分布范围不断扩大,蜱传脑炎呈现新的流行特点,表现为旧疫源地重新暴发、
学位
手性是大自然中生命体的一种基本特征,借助于分子组装和分子间相互作用,分子手性发生传递以及一定程度的放大,从而实现超分子手性的表达。由于类固醇天然的手性结构,基于类固醇的芳香功能团-连接基-甾体(Aromatic-Linking-Steroidal,ALS)型衍生物在凝胶材料和手性液晶中得到了广泛的应用。我们将类固醇结构与具有光响应性的基团相结合构筑了一系列的ALS型超分子组装体系,并进一步研究了其
学位
近年来,加密货币比特币的出现带动了区块链技术的蓬勃发展,而智能合约技术是区块链技术中的一个技术高地。目前以太坊中的智能合约应用受到大量的关注,创造了海量的应用价值,同时也带来了密集的攻击活动,造成了一系列重大的经济损失案件。因此对智能合约进行漏洞检测是非常有必要的。传统的漏洞检测方法包括符号执行、形式化验证、模糊测试等,目前这些方法的检测效率低、可扩展性差、准确率低,往往需要人工再审查。随着深度学
学位
多金属氧酸盐(polyoxometalates,缩写POMs)是由几种相同或不同的过渡金属离子缩合而成的离子氧簇,由于POMs尺寸、电荷密度和氧化还原电位的可调节性,使其具有优异的物理、化学性能,在储能、催化、光电和生物医学等领域得到了广泛的应用。钒硼酸盐和钒铁酸盐作为不断发展壮大的多金属氧酸盐家族成员受到了广泛关注。由于钒元素可以显现出丰富的离子价态(+3、+4、+5),它们与氧离子化学键合成不
学位
哺乳动物卵母细胞减数分裂成熟及植入前胚胎发育是一个复杂的动态生物学过程,受转录因子的调控。这些转录调控因子对卵子及植入前胚胎的发育潜能至关重要。研究发现,线粒体凋亡诱导因子2(AIFM2)在线粒体功能调节、细胞凋亡、脂质过氧化中发挥重要的作用。然而,AIFM2在小鼠卵母细胞成熟及植入前胚胎发育中的作用仍然未知。本研究进行的主要工作和结果如下:(1)AIFM2在小鼠卵母细胞成熟过程中的作用通过免疫荧
学位
金属腐蚀是一种普遍存在的破坏性自然现象,不仅造成巨大的经济损失,还带来严重的社会安全隐患。智能自修复防腐蚀涂层自动感知腐蚀破坏,主动抑制腐蚀活动或在最小的外部干预下自发修复涂层缺损,可有效延长金属材料使用寿命,拓展其应用范围。基于不同的修复机制,自修复防腐蚀体系可分为缓蚀剂基自修复和涂层本体自修复两大类,分别通过主动抑制金属基底腐蚀活动和修复涂层本体缺陷发挥防腐蚀效力。然而,缓蚀剂基自修复策略中缓
学位
小样本学习是近年来计算机视觉领域的一个研究热点,它借助模型所积累的先验知识,试图用少量的标记样本来完成对未知类的分类。虽然在这一领域很多工作取得了重大进展,但与传统的深度学习相比,小样本学习在分类精度与泛化能力等方面依然存在较大差距。而且,先前很多小样本研究工作很少重视在特定任务的上下文中,利用实例之间的特点来反映类之间以及类内样本之间的关系,因而不能学习出最具代表性和区分性的任务相关特征。针对上
学位
随着科技日新月异的高速发展,人们在生产力急速进步的情况下,对于新型化学材料的渴求也是越来越期待。正是在这种时代大背景下,共价有机框架材料(COF)应运而生。自从2005年世界上第一例COF问世以来,越来越多的化学工作们将目光投向于此,至此COF领域迎来了蓬勃发展的春天。共价有机框架材料(COF)顾名思义,是由稳定的共价键所连接组成的一种多孔的晶体材料。COF往往具有高比表面积、可调节的孔径大小和独
学位