光场稠密重建技术研究

来源 :中国科学院大学(中国科学院人工智能学院) | 被引量 : 0次 | 上传用户:pkuericz
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
密集采样的光场在深度估计、重聚焦和三维展示等应用中表现出得天独厚的优势,但是获取困难且昂贵。消费级便携光场相机如Lytro、Raytrix等携带方便、操作简单,但是受主镜头分辨率限制,空间分辨率和角分辨率之间存在权衡,不能同时被密集采样。在实际的视觉应用中,光场的空间分辨率和角分辨率受限成为微透镜阵列光场相机发挥其优势的主要瓶颈。近年来,在不改变光场采集硬件设备的基础上,合理有效的在空间和角度维度上实现光场的稠密重建,成为大量研究人员关注和研究的焦点。本文深度研究了针对角度稀疏采样的光场和稀疏视点采样的大视场光场的稠密重建,完成的主要工作如下:(1)基于可分离卷积神经网络的光场稠密重建针对便携式光场相机在空间和角度维度上不能同时进行密集采样的问题,本文设计并实现了一种基于自适应可分离卷积神经网络的光场稠密重建算法。算法的主要思路是通过卷积神经网络计算输入的光场子孔径图像对生成的目标图像的影响权重矩阵,将生成的权重矩阵与输入图像进行局部卷积生成目标子孔径图像。基于此思路,本文设计并实现了一种自适应可分离的卷积神经网络,利用输入图像和目标图像之间的关系,逐像素点计算RGB值,获取高质量的目标图像。本文提出了一种将目标子孔径图像的位置坐标作为网络模型的输入的方法,只需要更改输入网络模型的坐标,就可以获得不同位置的子孔径图像。该算法使用光场相机拍摄的稀疏光场子孔径图像,合理有效地在角度域上生成了密集的子孔径图像。(2)基于极平面图补全的光场稠密重建由于光场相机的视场角有限,在实际应用中,往往需要对大视场光场数据进行处理,使用光场相机对同一场景进行一次采集不能满足需求,平移光场相机进行密集连续拍摄耗时长且成本高,而且会产生大量的冗余信息。本文设计并实现了一种基于极平面图补全的光场稠密重建算法,该算法适用于稀疏视点采集的大视场光场的稠密重建。因为平移采集的光场极平面图上对应相同物体的直线的斜率相同,利用这一性质,本文将两个平移拍摄的光场极平面图上对应的直线进行匹配,通过对未采样位置的光场极平面图进行插值,合理有效的在稀疏视点采集的光场中间生成密集的新视点的光场。本文针对角度稀疏采样的光场和大视场光场实现了稠密重建,且重建的光场在相关质量评价指标上表现良好,本文工作将有助于进一步发挥密集采样的光场在广泛的计算机视觉相关应用中的优势。
其他文献
日前网络信息爆炸式增长,把信息按话题组织的同时,还需要将话题以简洁明了的方式展示给用户,通过有效简洁的文字表征话题(话题表示),以使用户迅速了解话题大意,获取所需信息
高分辨率图像一般保留了大量高频信息,便于进行后续研究处理。但是受到性能低下的图像采集设备和恶劣的外部环境的限制,在遥感成像、视频监视和医学影像等现实应用场景中,获
现代战争中海面低空目标突防的危险巨大,需加紧加大对海面低空目标跟踪策略的完善深入研究。由于海面镜面反射和漫反射引起的多路径传播效应对雷达跟踪低空目标的性能影响尤
二维过渡金属硫化物材料有很多独一无二的优点,比如带隙可调、量子产率高、强激子-光子和激子-声子作用。这些性质将使二维过渡金属硫化物成为未来光电元件潜在应用的首选二
无线通信技术近年来快速发展,各种新型网络形态逐步出现并趋向成熟。其中,无线自组织网络以无中心、自组织、无需基础通信设施等主要特点被广泛应用于医疗、交通、军事等多个
在正交频分复用(OFDM,Orthogonal Frequency-Division Multiplexing)技术中,循环前缀(Cyclic Prefix,CP)以牺牲频谱效率为代价来抑制多径信道带来的影响。但是在第五代移动通
在信息和数据收集不足的情况下,贝叶斯推理有助于人们合理运用习得的先验知识做出分析和判断。然而,以往研究表明,人们贝叶斯推理表现不佳。为此,Krynski(2007)提出因果贝叶
复杂零件三维形貌自动测量要求测量系统拥有较高的测量效率、自动化以及能够完成不同特征复杂零件的三维形貌测量。目前,结合工业机器人和光学扫描仪的测量系统可实现复杂零
随着计算机图形学,计算机视觉等前沿技术的高速发展,三维重建技术被广泛应用于虚拟现实、游戏建模、影视制作、三维打印等领域,对三维重建进行研究具有非常重要的现实意义。
地图是对客观世界的一种抽象表示形式,是空间信息存储、传递的最主要媒介,在人类的生产生活中扮演着重要作用。特别是地理信息技术愈发成熟的今天,无论是日常出行、农业生产