基于深度学习的单图像反射消除算法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:aifeideyuo0O
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
现阶段图像去反光已成为人工智能领域的研究热点,借助机器学习和深度学习算法可以对图片中的反光效果进行有效消除,方便且高效,但仍会面临诸多难点。图像中的反射层信息与背景层信息复杂耦合,分离困难;多张输入图像的相互比对用以剥离反射层和清晰的背景层,但多张图像的处理费时费力;去除反光后的图像无法保留原有信息的高频细节,丢失相关特征信息。因此,能否从单个图像中消除反射,更好恢复图像中的视觉内容尤为关键。本文针对以上去除反光任务中遇到的问题,通过分析背景图像、反射层图像和混有反射的原始输入图像的特征性差异,利用深度学习算法进行特征提取,进而图像分类,最后达到对输入图像的反射消除。主要工作如下:提出基于残差学习的单图像反射消除框架,完成了输入图像与残差图像的一一映射关系,对比相应的特征信息,得出反射层与背景层的差异性,最大程度地完成图像去反光任务。提出基于深度记忆的学习网络,类比于人脑的突触结构,将先前状态与当前状态相关联,形成短期记忆模式,多个短期记忆模式构成长期记忆单元,在去除反光的同时保留原有的真实细节。实验证明两种框架均可充分地利用特征信息,有效地去除图像中的反光效果。采用生成对抗网络进行对抗训练,生成器中设计深度残差块以及深度记忆单元,鉴别器中堆叠卷积层归一化层,通过对输入图像的分布特征进行建模,完成生成器与鉴别器之间的对抗学习,增强了输出残差图像的图像效果,进一步提供有效的梯度信息,以反馈的形式指导整个模型更好地学习图像特征,并连贯地生成更逼真更符合人类视觉效果的图像纹理细节。针对整个深度学习网络的目标函数,设计为多部分平衡损失函数,预训练的VGG-19模型提取图像特征,利用1损失函数衡量构成感知损失函数;内容损失函数可度量在前半部分网络训练过程中,目标图像和生成图像之间的特征化差异;对抗损失函数处理图像中的纹理细节;梯度损失函数在梯度域中最小化预测反射层和背景层之间的相关性。经实验证明,多部分平衡损失函数有效地加快了网络的收敛,且本文图像评价指标峰值信噪比(PSNR)达到24.84,结构相似性(SSIM)值为0.892,均取得了良好效果。
其他文献
有机硅具有很多其他材料不可比拟的优良性能,广泛应用于工农业生产和国防等高科技领域。随着现代工业的快速发展和新一轮科技革命的到来,对高性能材料的需求更为迫切,具有良
山体滑坡一直是人类面临的重大自然灾害之一。离子型稀土矿因地质环境及采矿工艺的特殊性,矿山采场频繁发生滑坡灾害。为尽可能减少因矿山采场滑坡给企业及矿区周边人民造成
岩石变形破坏过程的实质是内部微裂纹的演化,声发射是岩石变形破坏过程的伴生现象,其活动特征与微破裂演化活动的机制最为接近。岩石破坏前常存在声发射相对平静期,且其产生
函数依赖是重要的元数据,用于描述数据集中列之间的关系,可以被用于很多任务中,例如范式结构标准化,数据清洗等。很多单机和并行函数依赖发现算法已经被提出。之前的单机算法
环境是人们赖以生存和社会经济可持续发展的客观条件和空间,随着近现代工业的快速发展,环境污染也日益加剧,而在环境污染中,大气污染又是环境污染中危害范围最广,影响程度最
近年来,虽然我国煤矿事故总量和百万吨死亡率逐年呈下降趋势,但与其他发达国家相比,差距仍然很大。根据我国学者对国内外重大事故调查研究,发现人的不安全行为是导致矿难事故
多变量时间序列(Multivariate Time Series)是在每一个时间步上都有多个变量值的时间序列。多变量时间序列分类作为多变量时序数据挖掘的重要分支,具有非常大的研究意义。当
随着汽车轻量化研究的进展,镁合金因其密度较低,而在汽车上的应用越来越广,但也因其耐蚀性较差,而限制了它在汽车上的进一步应用。本文利用热喷涂技术在AZ31B镁合金表面制备
五自由度混联机器人融合了串/并联机器人在工作空间、刚度和作业精度等方面的优点,在电力装备、汽车、轨道交通、船舶、航空航天等领域复杂结构件加工方面具备十分明显的优势
可调谐半导体激光吸收光谱技术(Tunable Diode Laser Absorption Spectroscopy,简称TDLAS)由于灵敏度高、响应速度快等特点在气体检测领域得到了广泛的应用。但该技术中使用