基于双向深度图像渲染的实时高质量3D内容的生成

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:liongliong475
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,三维显示技术不断发展。自由立体显示技术作为三维显示领域的新兴技术,因其能够使观众在自由立体显示器前观看到逼真的三维影像,获得真实场景般的视觉体验,并且可供观看的范围广,引起了专家学者的广泛关注和国家大量的投入,拥有非常广阔的发展前景。由于自由立体显示器观看角度大,仅依靠单个参考相机生成虚拟视点,会生成很多难以填补的信息空洞。在当前的研究中,如何实时生成大视角高分辨率的3D内容成为一个热点。对此,本文在基于双向深度图像渲染基础上对自由立体内容的生成方法进行了研究,为解决虚拟视点绘制中出现的空洞和伪影等问题,提出了修复和优化方法,包括对深度图像的多层次滤波处理,最后采用GPU并行处理进行算法加速。本文的主要研究内容和创新性工作如下:(1)为填补双向DIBR生成视点图后存在的小空洞,改进了反向映射过程。在反向映射前,对前向映射后的深度图重复进行多层次的均值滤波,滤波窗口由大到小,进而填补了虚拟视点深度图中的小空洞。再利用填补好的深度图,重投影到参考图像。最后利用插值的方式,得到空洞处对应虚拟视点坐标位置上的像素值。(2)提出了基于深度图的图像修复算法。在DIBR过程中产生的较大空洞一般属于背景区域。修复空洞时,前景像素会造成干扰,因此本文中利用深度图像,将前景和背景分开,分别填充背景和前景剩余的空洞信息,使图像质量具有明显的提升,图片峰值信噪比能达到35dB,与传统的双视点DIBR相比平均约高3.5dB。(3)用GPU加速改进算法,并对算法的实时性进行评价和比较。算法的实时性是本课题的一个重要关注点,本文在设计算法时,尽量降低时间复杂度,采用较为高效的算法程序。实验结果表明,渲染一幅1920×1080的图像,耗时在40ms以下,与只用CPU计算相比,速率提升了约26倍,基本达到实时渲染的水平。最后,在Unity3D渲染平台上设计了一款可交互的赛车游戏,并在自由立体显示器上运行,实现了操作者与游戏模型间的交互。
其他文献
随着互联网中图像资源的爆炸式增长,面对数以亿计的图像资源,如何使用语义标签快速进行图像检索成为亟待解决的问题之一。传统的图像标注工作大多由人工完成,存在主观性和随意性,容易造成图像标签缺失、标注错误的现象。因此,如何有效地进行图像完备标注、丰富图像语义内容成为一个重要的研究课题。卷积神经网络因摒弃了复杂的特征融合过程,能够通过自主学习图像特征,更好地获取图像视觉信息。形式概念分析是一种有效的语义层
锂离子电池以其体积小、质量轻、能量密度高、使用寿命长、无污染等优点,受到使用者的青睐,逐渐取代其它材料类型的电池,成为市场上的主流产品。锂离子电池不仅可应用于便携式电子设备以及大型电动工具等,在太空探索、深海勘探领域也有一定的应用。但由于锂电池自身的特性,在使用过程中常发生电池电压过高、过低以及工作电流过大等异常情况,使得锂电池的寿命严重缩短,供电能力也大打折扣,情况严重时甚至发生爆炸等危险事故。
近年来,随着人口老龄化的加剧,我国老年人口数量日益上升,老人对晚年生活照护存在的需求也愈加多元,逐渐成为当今学界和社会密切关注的问题。通过对T市Y嵌入式社区养老院进行调查,发现其中的老年人普遍存在心理关怀缺失、情绪疏导不足、社会交往贫乏等问题;究其原因,包括环境变化易致内心情绪更加敏感,缺乏自我心理调适能力,护理员缺乏心理疏导意识,生理机能退化降低活动参与主动性,生活习惯差异容易引发矛盾等等;基于
受硬件条件、环境因素的制约和影响,在立体匹配中生成的视差图像可能包含比较严重的噪声、数据缺损和遮挡。这些视差缺损区域导致视差图难以反映场景的连续深度信息。视差图优化技术是指在已知部分完好视差信息的条件下,通过视差优化算法推测不可靠或缺损视差值,达到重构理想视差图的目的。作为三维重建的重要环节之一,该项技术近几年来已经在立体视觉和图像处理领域引起了广泛关注。本文首先介绍了视差图优化技术和稀疏子空间聚
由于频谱资源的紧缺,使得能够倍增频谱效率的全双工通信方式进入人们的视线。同时同频全双工通信在通信网络吞吐量与频谱利用率上的优势将在5G时代的未来工业互联网和物联网中发挥重要作用。这对于通信带宽严重受限的水声通信技术来说也具有重要的意义。为实现全双工通信,需要抵消严重的本地自干扰。根据作用域的不同,有传播域自干扰抵消、模拟自干扰抵消、数字自干扰抵消。本文主要研究模拟自干扰抵消与数字自干扰抵消。具体研
期货的出现为金融市场带来了历史性的变革,在其众多的特点当中,套期保值功能最为备受关注,同时该功能也是学者们十分热衷的一块研究领域。学术界对套期保值的研究从静态模型
目标的检测与跟踪一直是监控领域的研究热点。同时,目标检测的设备多种多样,包括有源雷达、被动雷达网络、双目视觉等。因此,是否能在监测区域同时利用多种探测平台对区域进行监测从而得到更好的检测效果?本作目的即在于设计一种处理框架使得多种检测平台所得数据可以统一处理。虽然针对各个检测平台与数据融合处理的算法已有很多,但时在统一处理框架中检测得到目标轨迹的效果依然难以令人满意。无论是单个平台的检测方法还是数
当今社会面临能源环境等多方面问题,电催化分解水制氢被认为是非常有前景的可再生清洁能源生产工艺。在电解水工艺中,阳极析氧反应(OER)是动力学缓慢的四电子转移过程,限制了整体能量效率的提升。提升OER反应速率的关键在于开发高效的析氧反应催化剂,降低反应过电势。根据电解液酸碱性不同,催化剂性能提升的重点也有所区别。在碱性介质中,重点在于充分发挥组分之间的有效协同作用,加快反应速率。在酸性介质中,重点在
本文首先构建一个均值-方差模型来说明住房财富增值对家庭资产选择的影响,并运用中国家庭金融调查(CHFS)2013及2015年两年的家庭追踪调查数据,研究了中国城市居民住房财富变动对家庭金融资产选择的影响及可能的影响机制。和以往文献不同,本文通过追踪数据构建每个家庭自身持有的住房资产加总在两年间的财富变化减去由装修带来的内生财富增值,分析住房持有者的财富变动是否会通过改变风险偏好以及金融知识的渠道影
紧缩场技术能够解决传统天线测量技术在毫米波与亚毫米波高频天线测量上的不足,本质上为一种有限空间内的伪平面波生成技术。随着太赫兹技术的发展,高频电大尺寸天线的电磁特性迫使紧缩场系统朝着高频率、大口径方向发展。综合加工精度和静区性能,大口径紧缩场系统一般采用多面板拼接的方式完成主面板的加工搭建,但一定大小的板间缝隙会带来缝隙衍射的影响,进而恶化静区性能。本课题针对的紧缩场系统是一种大口径三反紧缩场系统