面向多聚焦图像融合的深度神经网络算法研究

来源 :云南大学 | 被引量 : 0次 | 上传用户:shijiancuowu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于相机的光学镜头景深往往有限,导致使用这些设备采集的图像无法对场景中所有物体做到清晰成像。为了获取整个场景中对每个物体都清晰成像的全聚焦图像,多聚焦图像融合是一种常用技术。它通过融合同一场景中两幅或多幅部分聚焦图像,来生成一幅全聚焦图像。该任务的核心是源图像间聚焦区域的精确检测。为此,本文基于深度神经网络,对多聚焦图像融合问题进行了深入研究。在此基础上,提出两种新算法。论文主要工作如下:首先,针对已有基于卷积神经网络的多聚焦图像融合算法中存在的训练集没有考虑到自然多聚焦图像前后背景分别聚焦情况,且地真不是像素级标注;输出得分图尺寸与输入不一致,没有完成像素级的聚焦区域检测等问题,提出了基于全卷积神经网络的多聚焦图像融合算法。首先,考虑到现阶段没有大规模公开的具有地真的多聚焦图像数据集,介绍了一种用于合成多聚焦图像对的方法,合成了一个多聚焦图像数据库来有效训练深度神经网络。其次,使用一个具有单分支结构的全卷积神经网络来对多聚焦图像融合任务进行建模,并使用整张图像对其进行训练;训练良好的全卷积神经网络可以完成像素级的聚焦区域检测任务,且测试阶段不需要对网络做任何修改。使用全连接条件随机场来精细化网络的输出,进一步提升了融合效果。实验结果表明,所提算法超越了当前主流多聚焦图像融合算法性能。其次,针对已有基于深度神经网络的多聚焦图像融合算法中存在的没有考虑到融合决策图和源图像之间的匹配关系或缺乏精确的聚焦区域检测等问题,提出了基于条件生成对抗网络的多聚焦图像融合算法。该算法受到图像到图像翻译任务的启发,将多聚焦图像融合看作为多图像到单一图像的翻译任务。为了满足多聚焦图像融合中双输入单输出的要求,将生成器中的编码部分设置为孪生网络。为了更加稳定地对网络进行训练且生成高质量的指示源图像中聚焦性质的置信图,使用最小二乘生成对抗网络损失函数来代替原始生成对抗网络损失函数。此外,介绍了一种盘型点扩散函数来更加真实地对散焦场景进行模拟;在此基础上,合成一个大规模多聚焦图像数据库,用于有效训练网络模型。通过卷积条件场优化技术,进一步提升了融合图像的质量。实验结果表明,与当前主流的基于空间域的算法相比,所提算法具有更优越的聚焦区域检测能力;此外,在视觉感知与定量评价两方面,该算法均显示出了优于当前处于领先水平算法的性能。
其他文献
四足爬行机器人在斜坡执行任务时需要通过复杂地形,为确保其在斜坡的通过性,需要提高足端控制精度、掌握足端力的大小以及有效地识别地形,所以本文从斜坡下的多步态设计、腿
随着社会水平的快速向前发展和计算机处理水平的提升,现在已进入到数据爆炸的时代。受益于此,计算机视觉衍生出许多的分支,包括人脸检测、图像检索、安全监控、智能汽车、场
在信息化的时代,信息安全成为当今社会很重要的问题,密码学中的加密算法、数字签名和身份认证等等各种方法加强了对秘密的保护,而单单的进行秘密保护是不够的,于是秘密共享的提出为密钥的保护提供了新的思路。随着对秘密共享的不断研究,秘密共享由单秘密共享到多秘密共享,逐步走向成熟和完善。本文对自选子秘密的多秘密共享方案进行研究,多秘密共享是指在一次的秘密共享中就可以实现多个秘密的共享。自选子秘密是防止可信中心
随着工业4.0时代的到来,智能制造的发展和应用极大的促进了人类社会的进步与发展。制造执行系统(MES)是制造业企业在生产车间用于管理和监控工作流程的智能控制系统,它是上层
随着GPU等硬件设备的发展和大型标注数据集的公开,深度学习在计算机视觉领域展现了突出的性能。通过层层堆叠神经元,深度学习构建包含大量可训练参数的深度神经网络模型,并利
注意的空间-数字联合效应(Attention Spatial-Numerical Association of Response Codes Effect,简称注意SNARC效应)是指个体对数字进行较浅的知觉加工时,也能够自动激活相应的空间表征。注意SNARC效应具体表现为当小数作为线索时,被试对左侧目标的反应更快;当大数作为线索时,被试对右侧目标的反应更快。近年来,注意SNARC效应受到越来越多
手指动作识别是实现基于手势的人机交互的关键技术之一,目前主要有两类识别方法,其一是基于视觉传感器的手指动作识别,另一种则是基于运动传感器的手指动作识别。这两种方法
高精度二维角度传感器是三坐标测量机(CMMs)、探头、原子力显微镜和精密加工等仪器的重要组成部分,其测量稳定性是仪器测量精度的重要一环。环境中存在的温度、振动等干扰因
在商品检测与识别任务中,数据的采集与标注非常耗时耗力。商品种类繁多、新旧商品的不断更新换代、不同商品间差异性参差不齐,以及拍摄角度、光照、遮挡等各种不确定性因素的
基于IP网络技术,由电池供电,资源严格受限且要求低功耗的无线嵌入式设备是物联网发展的趋势之一。这些无线嵌入式设备采用分布式的方式大量部署,组成无线传感网络(WSN)。目前