DIBR系统中空洞填充技术研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:fmwksf
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,3D电影因其逼真的立体效果吸引了无数的粉丝。但是传统的3D视频(3D video)制作方法成本高、耗时长,限制了3D电影的普及。而基于深度图像绘制(depth-image-based rendering,DIBR)的方法可以低成本、快速地得到3D视频,因而被视为可以用来取代传统的3D视频制作的首选方法。但是,通过该方法合成的虚拟视图(virtual view)中有大量的空洞。空洞现象严重影响了合成视图(synthesized view)的质量,甚至会引发观众的视觉疲劳(visual fatigue)。高质量地填充空洞是DIBR技术中亟待解决的关键问题。本文的研究目的是高质量地填充DIBR系统合成视图中的空洞,促进DIBR技术在3D视频制作中的应用。论文针对两路“参考图像+深度图”(“reference image+depth map”)的情况,研究了空洞产生的机理,提出了一种修正的不产生空洞的摄像机设置方法。针对一路“参考图像+深度图”的情况,分析了空洞边缘前景和背景像素的特点,提出了一种基于超像素(superpixel)的空洞填充(hole-filling)算法;为了克服基于超像素的空洞填充(hole-filling)算法的缺陷,给出了改进的基于图像修复(image inpainting)的空洞填充算法。论文主要包含以下研究成果:(1)在双向DIBR技术(double-sided DIBR technique)的基础上,提出了一种修正的不产生空洞的摄像机设置方法。论文通过分析两种场景中空洞产生的机理,得出如下结论:在“背景-前景-背景”的场景中,不管摄像机参数如何设置,最终得到的虚拟视图均不含空洞;在“前景-背景-前景”的场景中,通过设置摄像机基线长度可以让最终得到的虚拟视图不含空洞。下一步的研究重点是推导出在非平行摄像机设置下不产生空洞的摄像机设置方法。(2)由于空洞需要用背景像素去填充,本论文提出了一种基于超像素的空洞填充算法。该算法首先利用SLIC超像素(SLIC-superpixel)算法分割虚拟视图,然后提取虚拟视图的单边边缘,并进行优先级计算,最后用分割得到的超像素作为最高优先级块的匹配块(matching patch)去填充空洞。实验结果显示该方法能够准确的区分前景和背景,同时对于纹理结构简单的图像能够取得很好的填充结果,但是对于两边都是前景的空洞,该算法会产生伪像(artifacts)。(3)针对基于超像素的空洞填充算法的缺陷,本论文提出了一种改进的基于图像修复的空洞填充算法。该算法首先采用基于视差图(disparity map)的空洞填充算法来填充空洞两边都是前景的空洞,然后采用改进的基于图像修复的空洞填充算法来填充剩余的空洞,其步骤为:首先设置标签来标记图像边缘空洞的位置,并提取出空洞的单边边缘,然后采用改进的优先级计算方法来计算空洞边缘的优先级,最后利用“夹逼(squeeze)”的方法来确定匹配块的搜索范围。实验结果表明该算法能够用来填充空洞两边都是前景的空洞以及不同零视差设置(zero-parallax setting,ZPS)平面下的边缘空洞,同时能够很好的恢复图像的纹理结构,在时间复杂度上也具有一定的优势。本论文针对各种应用场景中DIBR系统的空洞填充提出了不同的方法。研究成果将为DIBR技术在3D视频制作中的应用提供具有实用价值的新方法。
其他文献
中小学学生学业负担过重问题是一个涉及学校、家庭和社会多方的综合性问题,家庭对子女学业负担的干预折射出家庭教养的差异,不同家庭教养方式如何影响学生学业负担是一个有待深入研究的问题。本研究通过文献法为家庭教养方式和学业负担的维度划分、指标选取及其影响模型的构建奠定了基础,通过“家庭教养方式对小学高年级学生学业负担的影响研究调查问卷”对S市以学校层次为依据分层抽取的三所学校进行实地调研,并对部分学生和家
本文以大学 生跳远适宜助跑速 度为课题进行了教 学研究。研究结果 表明,适当降低最 后10米助跑速度, 导致被试跳远成绩 明显优于最大限度 发挥助跑速度的对 照实验成绩,对于
《普通高中英语课程标准(2017版)》提出了英语学科的核心素养,思维品质首次被明确列入其中。我们的目标是培养学生的思维品质,尤其是能辨析语言与文化中的具体现象,梳理概括信息,建构新概念,分析推断信息的逻辑关系,正确批判各种思维观点,创造性的表达自己的观点,具备初步运用英语进行思考,创新思维的能力。培养学生思维品质的方法有很多。其中,提问对教师来说是一个重要的方法。从培养学生思维品质的角度出发,本论
通过对山西省部分大学生课外体育活动的调查分析,为改善和提高大学生课外活动的质量提出相应的对策和意见。
并不是所有影响热带气旋均会成灾,TCs事件发生灾变风险的诱因涉及致灾因子(风险源)、承灾体、孕灾环境、抗灾能力等四方面,但根本原因是致灾因子风险源的强度及异常程度。致
从大学生知识社会化过程中主体性的角度来探讨他们对目前体育教学状况的感受和教学改革的意愿。并对调查结果做了分析,目的是加大改革的力度,为构建适应21世纪的高等学校体育教
大空间建筑是一类能耗特性、使用模式和室内物理环境分布都与一般公共建筑有明显区别的特殊建筑类型,特别是以交通建筑为代表的大空间公共建筑,近年来增量巨大。大面积的玻璃
【正】 一、前言目前,跳高的技术日趋完善,对技术的研究已非常透彻,要提高运动成绩,就必须提高运动员的全面身体素质和专项身体素质。而成绩往往是建立在专项身体素质之上的,
淬硬模具钢是一种典型的难加工材料,超声加工在淬硬材料加工方面具有独特的优越性。通过超声振动运动学特性分析,对超声切削中切屑的形成机理进行了研究;采用Ti N涂层硬质合
思想政治工作是我们党的优良传统,也是我们工会组织说服教育职工,稳定职工队伍,调动广大职工工作积极性的重要手段,随着油田改革的不断深入,诸多问题和矛盾呈现出来,这就为工会组织