基于深度学习的双目图像超分辨率重建技术研究

来源 :西南科技大学 | 被引量 : 0次 | 上传用户:bingling1054
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人们对视觉的极致追求,获取像素密度高的图像成为视觉任务的研究重点。受限于硬件成本和成像原理等条件,我们难以捕获到细节丰富的图像。通过软件的方法提高图像分辨率的过程称为图像超分辨率(Super Resolution,SR)重建,双目图像SR旨在由同一视点两幅不同低分辨率(Low Resolution,LR)图像重建出一幅高分辨率(High Resolution,HR)图像,随着科技发展,双目图像SR在机器视觉领域日益广泛应用。由于输入为双目LR图像,使得输入特征间存在视觉、特征和景深等差异,针对这些问题,各类重建算法被提出。但由于双目互补信息的难利用性,双目图像SR重建面临巨大的挑战。本文针对双目图像特征提取与信息冗余问题,提出两种基于视差学习的双目图像SR网络,充分利用双目图像间有效信息优势,获取丰富特征的同时降低模型复杂度,并重建出细节丰富的SR图像。本文研究工作内容如下:1)提出回环结构与PAM(Parallax Attention Module)结合的双目图像超分辨率重建网络。针对双目图像SR中特征提取不完整和特征互补问题,本文提出一种多尺度特征提取和视差注意力结合的SR网络。该网络分为特征提取、视差注意力和超分辨率重建三部分,首先,改进扩张残差与改进空洞空间金字塔池化模块经残差连接形成回环结构,提取LR图像多尺度多深度特征;接着,将提取的左右特征图经视差注意力机制得到视差图,并采用形态学操作处理双目遮挡问题;最后,采用四个扩张残差块融合特征图,并重建出SR图像。实验结果表明,该网络在Middlebury测试集中图像放大4倍的PSNR值达到28.75d B。2)提出基于特征通道蒸馏的双目图像超分辨率重建网络。针对双目图像特征冗余和模型复杂度的问题,本文提出一种基于特征通道蒸馏和特征优化的双目图像超分辨率网络。该网络分为特征提取、特征优化、视差注意力和超分辨率重建四部分,首先,采用改进特征蒸馏模块提取LR图像蒸馏特征和降维特征,并采用门控机制融合多尺度特征;然后,采用Ghost作为网络过渡块,融合前一部分特征的同时学习后部分视差计算的网络能力;最后计算得到视差图用于网络的重建。经实验对比,该网络比第三章网络图像放大4倍的PSNR值增加了0.06d B,参数量降低了0.384M。3)为了测试所提网络的适用性,对监控视频、现实场景、医学图像和老照片的LR图像和SR公开测试集进行测评,并分析本文所提两个网络的优势与不足。结果表明,本文两个网络能恢复出LR图像大量细节信息,且当输入为不同帧图像时,本文网络具有较大优势,且更具鲁棒性,其中第四章网络表现出比第三章网络更好的SR性能。
其他文献
目的 探讨益胃汤合麦门冬汤对胃阴亏虚型慢性胃炎患者的临床疗效。方法 102例患者随机分为对照组和观察组,每组51例,对照组采用四联疗法,观察组采用益胃汤合麦门冬汤,疗程1个月。检测临床疗效、TGF-β1、PCT、IL-32、PGⅠ、PGⅡ、GAS、胃动力学指标(胃窦收缩幅度、胃窦收缩频率、胃排空时间)、Hp根除率、不良反应发生率变化。结果 观察组总有效率、Hp根除率高于对照组(P<0.05),不良
随着新能源汽车和自动驾驶技术的不断发展,人们对可靠的驾驶辅助系统也提出了更高的要求。FCW系统是ADAS的重要组成部分。该系统一般是通过雷达系统检测前方车辆,判断前车的距离、方位及相对速度,缺少对前车的行为分析。针对此问题,本文提出了一种车辆速度测量和车辆行为分析相结合的FCW系统设计方案。该方案将双目立体视觉系统搭载到目标车辆,通过双目立体视觉原理对车辆前方同向行驶的车辆进行速度测量;同时通过改
目的:研究野葛根的化学成分。方法:采用硅胶柱色谱、Sephadex LH-20凝胶柱色谱、高效液相色谱等方法进行分离纯化,通过理化性质及波谱数据分析鉴定结构。结果:从野葛中分离得到37个化合物,分别鉴定为:丁香酸(1)、丁香醛(2)、对羟基苯甲酸乙酯(3)、(-)-鹰嘴豆醇(4)、甘草素(5)、刺芒柄花素(6)、3’-羟基-大豆苷元(7)、染料木素(8)、毛蕊异黄酮(9)、印度黄檀苷(10)、染料
针对矿井空压机能耗减排问题开展深入研究,以GFR-80型轴流式压缩机为研究对象,提出修复漏气、使用外部空气、降低压缩机气压等节能措施。同时从矿井工程现场的空压机应用分析得出15个具体的减排措施,帮助煤矿企业节约能耗,提高经济性。该研究成果可为空压机制造厂商和煤矿技术人员在空压机运行减排方面的技术研究提供依据。
学位
针对应用于青藏公路边坡防护的5种生态措施,通过开展实地径流试验对其水土保持效果进行对比研究。结果表明:采取措施的小区产流时间相对于裸坡均有一定时间的延长,延长幅度介于9%~70%,且随着冲刷流量的增大,这种延长幅度呈减小趋势。随着冲刷流量的上升,不同护坡措施下的减流减沙效益均出现下降现象,平均减沙效益从36.94%下降到4.56%,平均减流效益从42.15%下降到9.65%。不同冲刷流量下,各护坡
思想政治工作是经济工作和其他一切工作的生命线。本文深入阐述了国有企业在深化改革的大环境下,党的思想政治工作面临的困难与挑战,在开展思想政治工作的实践与探索,旨在提高国有企业党的思想政治工作的质量和水平,有力促进国有企业深化改革,实现高质量发展。
信息技术的飞速发展,对各行业的影响越来越直接、越来越深刻。而目前国内大多数水厂运行与管理的信息化程度落后于其它行业,对于水务企业来说,企业发展一定要紧跟时代的进步,企业需要充分认识到现代信息技术已经成为影响水务行业发展最重要环境因素之一。水厂生产与管理的模式转型,需要充分依托现代信息技术,开展水厂综合信息平台建设,在先进的水厂综合信息平台的帮助下,迅速提升水厂的生产和管理效率,加速水务企业乃至整个
目前普通中老年服装是基于日本版型进行放量设计,并没有针对老年人体型与身体需求开发新的版型,无法满足长期卧床老年人生理和心理需求。针对上述问题,本文通过在长期卧床老年人功能性护理服的穿脱便利性、隐私保护性,尿湿实时监测及报警的功能性方面进行研究,利用假人进行排泄物测试设置尿湿监测装置位置,最后对成品进行检测。结果表明,尿湿报警器报警成功率为100%,无误报警现象,护理服在满足穿着舒适性的同时实现尿湿
物体的三维测量技术在工业缺陷检测、计算机几何模型设计以及周围环境场景重建等方面具有很高的研究价值和实用意义。双目立体匹配技术基于非接触式测量,因其结构简易、价格低廉、适应性广成为最受关注的三维测量方式。如何有效解决实测场景中光照、噪声等干扰,提高三维测量的精度,是研究的重点和难点。文章基于立体视觉技术,研究分析双目三维测量重建的各个步骤,重点对立体匹配算法进行改进,提高匹配的精确度,以满足室内近处