光场的空间超分辨率和解耦角度重建

来源 :上海师范大学 | 被引量 : 0次 | 上传用户:Aiming
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
光场技术作为一项前沿的技术推动光场相机的应用,光场图像是多个摄像机从不同角度拍摄同一场景所获得的图像的集合。近年来光场成像设备不断发展,光场图像处理被广泛研究。但由于光场相机的传感器分辨率有限,光场相机面临着空间分辨率和角度分辨率之间的权衡。为了捕捉场景中光线的强度和方向,光场相机无法同时获得高空间分辨率和高角度分辨率的图像。针对以上问题本文对视图一致性的光场空间超分辨率重建和光场角度超分辨率重建分别进行了研究。本文工作内容如下:(1)为了克服现有技术存在的对光场图像中的信息利用不足和视差结构不能很好的保存而设计了一种面向视图一致性的光场超分辨率重建网络。该网络首先获取光场图像,预处理后得到子孔径视图,通过构建的全对一光场图像超分辨率网络,引入空洞金字塔模块,扩大感受野,深度提取特征,根据视图之间的互补信息和相关性对每一个子孔径视图进行超解析,包括全对一特征提取、视图融合和上采样,融合后得到中间高分辨率光场图像,接着构建空间角度正则化网络,利用空间和角度之间的关系保留视差结构,重建光场图像,最后将全对一光场图像超分辨率网络与空间角度正则化网络结合,进行整体超分辨率处理和优化得到最终超分辨率光场图像。通过在HCI和斯坦福等数据集上进行实验,验证了本文的可靠性,提高了重建图像质量。(2)为了捕获不同视图之间的对应关系,深度提炼有效的角度信息,本文提出了一种角度自注意力模块的网络,非局部的捕获对应角度信息,并利用空间和角度信息解缠融合的方式重建密集光场。充分解缠并融合空间、角度和EPI维度的信息,使重建视图更加清晰;设计了角度自注意力模块通过非局部的计算并生成角度特征关注图,学习有效的角度信息抑制冗余信息;最后通过细化模块恢复光场图像的细节。实验结果表明,该方法在HCI和Stanford的光场数据集上得到的结果优于当前几种主流重建方法。
其他文献
根据第七次人口普查数据显示,我国老龄化程度进一步加深。在此背景下,如何养老已经成为我国社会发展的重要问题。随着老年人口的不断膨胀,养老需求的不断提升,产生了养老环境压力、养老需求难以满足等诸多问题。建设老龄友好环境是我国应对人口老龄化问题采取的重要举措,构建老龄友好环境评价体系是指导老龄友好环境建设的必然要求。本研究着眼于老龄化背景下上海既有住区室外环境的提升问题,采用马斯洛需求层次理论结合实证研
学位
高校承载着人才培养、科学研究和社会服务的功能,大学生众创空间作为大学知识溢出和创新研究集中迸发的场所,是集合“产、学、研”一体化发展的综合性平台。在经过一定时间的高速发展后,大学生众创空间的建设发展存在着功能单一、空间运行不畅、创新服务不健全等问题。经过多年共存,老城区高校与其周边区域相互影响,高度融合。众创空间作为高校重要的空间类型,是创新创业知识充分发散的场地。本文尝试运用SECI理论对大学生
学位
以深圳市塘朗山为研究对象,首先通过对塘朗山的地形中坡度,坡向,海拔,垂直弯曲方向等要素的收集,运用视域通视性分析的方法,通过分析它们的变化对视域范围的影响,得到地形变化与视域范围变化的相关性程度大小和其相互作用规律,为观景平台选点提供视域参考。其次,运用视线通视性分析的方法,通过对点与点间可见性的研究,构成由视域面精准到视线点的视域网结构,通过连接与改善点,线,面的相互关系,将视觉呈现的复杂性转化
学位
纸币研究是货币史、经济史研究的重要组成部分。民国时期仅发行过纸币的地方银行就约有134家,纸币从某个角度体现了当时社会政治经济的现状。民国纸币上的信息包括发行机构,冠字号码、年号、签字和面额等。利用计算机自动高效的提取民国纸币中的文字信息,对馆藏纸币数字化储藏系统的开发有着重要的意义。由于民国纸币文字信息位置不固定、出于防伪设计的文复杂构图、艺术字体以及大量弯曲文本等因素,增加了民国纸币检测识别的
学位
<正> 文献综述是以某一专题为中心而搜集最近一段时期(通常为2~3年内)有关文献,所写成的带概述性的文章。这类文章的特点是综合性强、资料新、涉及面一般较窄,但较深入,有一定的时间性。撰写者多与本专业有关,并对该专题有多年研究经验。文献综述是一种受读者(尤其是从事科
期刊
随着自动驾驶技术的发展,人们对自动驾驶的安全问题日益关注。当自动驾驶车辆驶入街道,会遇到需要避让行人的情况。为了让自动驾驶车辆在短时间内做出正确的决定来保障行人的安全,研究人员开始对行人的轨迹进行研究,并提出了行人轨迹预测算法。行人未来的运动轨迹不仅受到自己的主观意识影响,还会受到相邻行人的影响,因此行人的轨迹存在随机性和高动态性,这些特性使得行人轨迹预测问题充满挑战。本文的研究内容主要包括以下几
学位
随着计算机视觉技术的不断进步,在目标检测、跟踪和识别过程中,清晰的图像一般都能取得更好的效果,获得更高的精度。但在实际场景中,图像很有可能会受到真实环境因素的影响。这可能导致原始图像的视觉效果、数据质量等大幅下降,影响后续任务。因为大部分的算法研究都忽略天气影响,如不考虑雨、雪、雾等干扰。因此,在未来的视觉任务中,研究需要深入考虑天气因素的影响。本文对现有单幅图像去雨算法进行分析并总结现有方法存在
学位
城市燃气管网系统是城市重要的能源供应系统。燃气负荷预测是其非常重要的功能,对城市燃气合理并安全的利用具有举足轻重的意义。在现今众多的燃气预测方法中,门控循环单元(GRU)已经成为一个主流方法,能较好的挖掘燃气负荷数据的自相关特征及其他特征。本文在采用GRU进行燃气负荷预测的研究中发现该方法在时序维度上捕获信息的能力仍旧显得较弱,很难得到精确的预测结果。对此常用的解决方法是采用注意力机制强化时序信息
学位
2021年,武术中考在上海市正式开启,初中学校武术得到了全面普及与落实。这也代表着国家对民族文化以及民族传统体育的重视度越来越高,国人对民族传统体育的关注度也越来越高,武术项目作为育人、文化传承的载体任重而道远。但武术项目在学校中的发展存在着许多问题,武术在学校如何实施也是社会各界都在关注与研究的问题。因此,本文通过对上海市十六个区各个中学的武术实施情况进行调查,分析出上海市武术实施的影响因素并提
学位
半导体激光器拥有体积小、波长覆盖广、相关性高、可批量生产、可单片集成化等优点。中红外波段是大气的窗口波段,且覆盖很多重要分子的特征谱线,因此对该波段光源的研究已成为目前世界上的热门课题。锑化物涵盖Al、Ga、In、As、Sb等Ⅲ-V族半导体元素,是目前中红外器件首选材料。而有源区带间级联的结构特点使器件能拥有比较低的电压,阈值电流密度和功率损耗。目前以Al Ga As Sb作为波导包层的ICL的研
学位