基于深度学习的微光图像立体匹配及分割方法

来源 :中国科学院大学(中国科学院西安光学精密机械研究所) | 被引量 : 0次 | 上传用户:twesai
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于深度学习的立体匹配网络近些年得到了快速地发展,并广泛应用于自动驾驶、机器人导航、三维重建等领域。现有的立体匹配算法研究一般是在较好的光照环境下,并且获得理想的视差图,在阴天、夜晚等弱光条件下,目前的基于深度学习的立体匹配算法匹配准确率不高。因此,本文以微光图像为研究对象,首先对微光图像进行立体匹配算法研究,再以图像分割为应用方向展开讨论。针对微光图像,本文提出了一种促进图像去噪与立体匹配一体化的金字塔抗噪立体匹配网络(a noise-resistant pyramid stereo matching network,NR-PSMNet)。在经典的立体匹配网络中加入图像重构模块,实现微光图像的去噪。通过多任务学习的思想结合立体匹配模块与图像重构模块,在训练过程中两者互相约束,共同作用于特征提取部分的网络参数更新,实现图像重构模块辅助微光图像在立体匹配模块中获得更加准确的视差图。实验模型在模拟微光处理的KITTI2015数据集、Middlebury数据集和真实拍摄的微光图像上进行测试,改进后的算法的立体匹配效果得以提升。微光图像噪声复杂且严重、对比度低、纹理特性不明显、光照不均匀,在对其进行图像分割时,无法准确地获得对象轮廓,得到较好的分割结果,因此,结合微光图像与上述生成的视差图,通过在微光图像中引入深度信息,可以实现信息互补,从而获得较好的分割结果。本文利用基于信道注意力的分割网络(Attention Complementary Network,ACNet)有选择地从微光图像、视差图以及各层融合特征三个分支逐层提取图像信息然后进行特征融合,得到更高质量的特征,再对其进行上采样实现图像分割。实验模型在模拟微光处理的NYUDv2数据集以及真实拍摄的微光图像上进行测试,相较于仅使用微光图像作为模型输入的图像分割可以获得更好的分割效果。
其他文献
照明与人们的生活密切相关,照明对人的视觉特性包括视觉辨别力和视觉舒适性等,及非视觉特性包括生理和心理等都有较大的影响。LED开关时间短及易于控制的特点,使得LED的实际应用中常采用PWM的方式进行调光。LED工作于脉冲状态下,会造成一定程度的频闪,超过特定频闪指数的光照对人体生理和心理产生不良影响,但其在对人眼的感知亮度上却有提升效果。脉冲驱动的LED产生的光照对人体在视觉和非视觉上的影响存在一定
目前,新兴的非易失内存(Non-volatile Memory,NVM)正在逐步走入人们的视野。由于这类存储技术同时具备了低延迟、持久化、大容量和字节可寻址的特性,数据库系统可以运行在只
从上世纪六十年代,人类开始使用航天器进行深空探测或对地观测,以求对宇宙中存在的物质、现象或其起源等有更加深入的认识与了解。相机系统是航天器的主要载荷,而由于其中的光学反射镜的面形精度很大程度上决定了相机系统的成像质量,因此成为相机系统中的核心组件。目前,随着国家对深空探测精度要求的提高,望远镜技术的要求也越来越高,即空间相机需要有更高的清晰度和分辨率要求。而增大相机系统中反射镜的口径是达到这一目的
当前俄罗斯正面临着困难的和不稳定的国际局势。乌克兰危机之后,西方国家对俄罗斯进行了多轮经济制裁,这也对俄罗斯经济产生了严重的后果。这也是为什么我们需要着重分析当前
目前,作为非中考科目的地理在初中阶段的教学中不受学生重视,而且学科知识内容比较广泛,对学生的思维能力要求较高,学生在学习时具有一定的难度。而广泛应用于情报学与企业知识管理的可视化工具——知识地图,也逐渐被作为一种信息化手段应用在教学实践中。知识地图能够通过线条、知识关键词等视觉手段显示知识点及其之间的关系,综合呈现知识点以及不同知识点之间的内在关系和层级结构,从而帮助学生树立该学科的整体知识网络,
在历年的初中语文教材中,散文始终是初中语文教材的主导文类。所以,教好散文对改善和促进整个语文教学显得尤为重要。回忆性散文在初中部编本教材散文选文中所占的比重很大,足足有10篇。学生通过阅读回忆性散文,可以分享作者的,这种回忆带来的“特有的生命体验和情绪状态”,这是阅读其他散文所没有的。所以对回忆性散文教学的研究是刻不容缓的。《背影》作为一篇久经岁月的课文,在部编本教材中被赋予了新的性质——回忆性散
本文旨在实践研究和分析,基弗风景画表现手法对笔者以江汉平原风景为创作蓝本产生的影响。基弗作品的构图和颜色激发了我对于故乡的回忆的探索。被基弗独特的构图所启发,我试图在我的艺术和家乡之间建立起一座桥梁来达到一种和谐,使我的情感能缓缓地流进我的艺术形式里。本文由引言、正文、结论三大部分组成,第一部分引言主要是论文的研究目的与意义、研究方法、文献综述、论文重难点、创新点四个方面;正文部分作为论文的重点从
随着现代社会科技与经济的飞速发展,工业4.0作为新的发展热点和发展方向被提出,其中智能检测系统和智能装备作为重要的发展方向,成为现代社会和政府所关注的重要研究课题。无
自改革开放以来,中国城镇化率不断攀升,在过去的40年间,无数新城镇拔地而起,为国民经济发展提供了新鲜血液。而与此同时,城市化也带来了前所未有的“乡愁”危机,大量记录着人们生活情感的大街小巷、村头市集因为新城镇建设的需要而被迫退出历史的舞台,这些场所作为人们日常生产生活以及人际交往的载体,见证了一座座城市的兴盛衰荣,如今却一步步消散在滚滚洪流中。针对这类城市记忆场所的遗失问题,很多地区开始了“城市记
学位
被誉为“边塞诗三剑客”的周涛自20世纪80年代中期开始写散文,先后发表了《巩乃斯的马》《稀世之鸟》《游牧长城》等千余篇散文作品,他的行文风格和其散文所表现的西部独特的自然风光和人文风情给散文界吹进了一股别样的气息,同时也受到了学界的普遍关注。2018年周涛发表小说《西行记》,再次攀上小说的高峰。文章从四部分入手研究周涛的这些作品。第一章主要分析周涛20世纪80年代中期到1992年的散文作品,侧重从