大视差虚拟视点内容生成中的空洞修复方法研究

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:liyibo6941
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
高质量的3D内容是立体显示技术能够长远持续发展的关键因素。随着3D显示器的分辨率不断提高,视点数逐渐增多,立体显示内容在生成速度、处理算法方面面临新的挑战。受限于3D内容场景复杂、深度信息提取困难,直接通过2D图像生成3D图像的需求很难实现。传统的2D转3D图像需要耗费大量的人力和时间,在2D+D生成立体图像过程中产生的空洞会严重影像观看感受,如何对空洞进行自然真实高效的填充是虚拟视点生成处理的难点。为了提高大视差、超多视点、高分辨率3D内容的处理效率和质量,需要采用新的处理手段和算法,实现空洞内容的自动预测和填充。本文基于深度神经网络,针对大视差虚拟视点内容生成中的空洞的修复方法进行了研究,具体来说,本文的主要创新点和研究内容如下:1.对两种传统空洞修复算法进行了研究,分别是基于块匹配的修复算法、基于示例的修复算法,并完成了优化。在基于块匹配的修复算法中,使用图像金字塔模式生成不同尺度下的空洞填充搜索窗口,能够兼顾全局信息和局部纹理;在基于示例的修复算法中研究了块大小尺度对空洞修复效率和质量的影响,得出最佳块大小尺度。相较于原生传统算法,经过本文优化后的图像修复算法具有稳定性高、修复速度快,能够高效修复大型空洞的优势。2.提出了基于深度学习的大视差空洞修复模型,实现了大视差虚拟视点生成过程中空洞的修复。本文提出的神经网络通过自编码器实现图像整体语义的预测,通过生成对抗网络使生成的空洞填充部分更加清晰真实。在此基础上,本文还创造性地出了风格预测网络,本文认为空洞周围区域的纹理风格和空洞处的纹理风格应该是相近的,因此提取空洞周围的风格,将其融合到空洞填充区域中,这样大大提高了修复的真实程度。相较于当前基于深度学习的主流空洞填充算法,Mean L1 Loss(L1损失函数)和Mean L2 Loss(L2损失函数)分别降低了0.42和0.09,PSNR(峰值信噪比)提升了0.38。3.提出了渐进式大视差空洞图像修复模型,解决了基于深度学习的空洞填充算法只能处理低分辨率图像的问题。论文采用从小到大迭代式的图像生成模式,首先对待填充的高分辨率图像进行一系列降采样,使其降低到一定的分辨率,对该低分辨率图像进行空洞填充,然后经过一系列上采样,依次再进行空洞填充,逐步实现高分辨率图像空洞填充。依据该模型,实现了 1080×1920分辨率图像的空洞填充,平均一张图片耗时0.1s,信噪比为17.9db,优于其他已有模型。
其他文献
[目的]总结明清伤寒维护旧论派(以下简称维旧派)医家研究《伤寒论》的思想和影响,以期正确评价伤寒维旧派.[方法]本文结合明清至近代思想史,梳理维旧观点的提出、发展和式微的过程.[结果]维旧派代表医家研究《伤寒论》,受到了儒学注经思想与方式的影响,其维旧观点的提出与理论发展,体现了儒家“尊闻”与“裁断”的治经思想.维旧派的意义在于推动《伤寒论》经典化和维护《伤寒论》文本的规范性,并且在后世《伤寒论》的流传与普及中起到了重要的推动作用.而因近代新旧文化之争,“求古”取向与“求新”的时代思想相悖,被视为守旧落后
[目的]通过数据挖掘的方法,探究何若苹教授治疗围绝经期综合征的用药规律.[方法]收集何师诊治围绝经期综合征的112首处方,提炼方药信息,建立相关数据库,分析药物使用频次及组方规律,运用数据挖掘的方法如关联规则分析法、系统聚类分析法等探究何师治疗围绝经期综合征的潜在用药规律.[结果]收集的112首处方中涉及药物共173味,其中频次≥20次的中药28味.药物中使用频次以补虚药、清热药为高;药性多为温性,其次为寒、平性;药味以甘、苦、辛为主;归经中肝经最多,肾经次之,心脾胃再次之.关联规则分析表明常用药对有山茱
[目的]挖掘高祥福教授治疗系统性红斑狼疮(systemic lupus erythematosus,SLE)的选方用药规律.[方法]收集2017年7月1日至2020年6月30日高祥福教授门诊就诊的SLE患者资料,构建方剂数据库,对药物的累计频数、药物类别及性味等进行描述性分析,提取出频数最高的50种药物,并进行系统聚类分析以及关联规则分析.[结果]符合纳入标准的诊次共630次,其中涉及中药181味,使用频数最多的前5项为生地黄、青蒿、丹参、金樱子、芡实.累计用药20大类,清热药、补虚药、活血化瘀药、收涩药
近年来,基于表面等离子体共振(Surface Plasmon Resonance,SPR)的光子晶体光纤(Photonic crystal fiber,PCF)生物传感器引起了很多研究人员的关注。光纤等离子共振生物传感器被广泛用于病原体、毒素、抗体和蛋白质的检测中,在健康诊断、生物医学、生化分析和环境监控等领域发挥重要作用。相比于基于Kretschmann大棱镜的传统表面等离子体共振生物传感器相比
[目的]根据名老中医陈永灿(下称陈氏)诊治慢性萎缩性胃炎(chronic atrophic gastritis,CAG)的临床资料和诊疗方案,挖掘基于置信规则库(belief rule base,BRB)的CAG辨证经验.[方法]对症候信息进行编码,将症候“有、无”分别赋值为“1、0”,以此建立CAG中医症候信息数据库.将编码后的信息作为CAG辅助诊断模型的输入特征,通过BRB挖掘症候信息与证素之间的关系,利用证据推理(evidence reasoning,ER)融合算法对输入特征进行激活处理并输出结果,
目的 探讨椎管内分娩镇痛应用于重度子痫前期患者阴道试产中的效果.方法 回顾性分析2018年1月到2021年1月于本院分娩的68例重度子痫前期患者的临床资料.依据是否实施椎管内分娩镇痛分为镇痛组(实施分娩镇痛,45例)与对照组(未实施分娩镇痛,23例).比较分析两组分娩方式、降压药使用率、缩宫素使用率、产程时间及产后住院时间.结果 两组顺产、中转剖宫产及降压药使用率无明显差异(P>0.05);镇痛组使用产钳率明显低于对照组,缩宫素使用率明显高于对照组,差异均有统计学意义(P<0.05);镇痛组第一产程明显低
目的 探讨三维能量多普勒超声应用于宫腔粘连术前诊断的价值.方法 回顾性分析2019年6月至2020年12月于本院就诊的78例疑似宫腔粘连患者的临床资料,所有患者于术前都进行二维多普勒超声、三维能量多普勒超声检查,将宫腔镜结果作为金标准,对比分析二维多普勒超声、三维能量多普勒超声的诊断效能,及宫腔不同粘连程度三维能量多普勒超声血管化血流指数(VFI)、血管化指数(VI)、血流指数(FI)值.结果 通过宫腔镜检查显示,14例宫腔正常,占比17.95%;64例宫腔粘连,占比82.05%,其中27例轻度粘连、26
目的 探讨分析互联网统筹+医养结合管理模式对居家脑卒中患者的康复预后及疗效.方法 回顾2020年6月至2021年1月绍兴文理学院附属医院收治的60例脑卒中患者为研究对象,按照不同的管理模式,将患者分为实验组和对照组,2组住院期间均采取常规药物治疗、康复功能训练以及健康教育.对照组在出院后采用常规家庭照护模式,实验组采取互联网统筹+医养结合管理模式.2组患者分别在出院时、出院后3个月、出院后6个月进行日常生活活动能力(ADL)和脑卒中专用生命质量测定量表(SS-QOL)水平测定,采用SPSS 25.0统计学
春风化雨,草长莺飞.遇见,便懂得,相守,一直都在.rn我们常常流连于各类名人细腻动人的生活,就像感动于杨绛和钱锺书广为流传的灵魂伴侣的故事.当我们还在回忆过去,时光却一直在行进,这些人就在身边.rn四年前一个夜班的清晨,朦胧的夜空由黑色变成灰色,再变成白色.推开门,我看见不知何时偷偷溜进来的几缕阳光,看见床头柜上几枝鲜活却不那么艳丽的花,看见她忙碌的身影却始终笑容满面.我想这是生活,也是故事.
期刊
[目的]明确仙芎骨康颗粒对半月板-前交叉韧带联合损伤所致骨关节炎(osteoarthritis,OA)大鼠模型的治疗作用,并初步探索其作用机制.[方法]48只SD大鼠随机分为空白对照组,模型组,仙芎骨康低、中、高剂量组,阳性对照组,除空白对照组外均采用Hulth法建立大鼠OA模型,造模与给药同时进行,仙芎骨康低、中、高剂量组分别灌胃给予仙芎骨康药液11.25、22.50、45.00 g·kg-1,阳性对照组灌胃给予盐酸氨基葡萄糖(0.09 g·kg-1)和塞来昔布(0.75 g·kg-1),模型组和空白对