高自由度视频编码及渲染关键技术研究

来源 :浙江大学 | 被引量 : 0次 | 上传用户:SHANGTIEYING
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人类在观看真实场景时,可自由地进行位置和朝向的变动。高自由度视频模拟了这一特性,采集用户在观看视频时位置和朝向的信息,实时渲染目标视点图像呈现给用户,提供双目立体视差和运动视差,使用户获得强烈的交互式和沉浸式视觉体验。国际标准组织MPEG已开展相关标准制定工作,推动高自由度视频尽早进入市场。但是,高自由度视频在实际应用中还存在诸多障碍。首先,高自由度视频需布置大量视点采集场景信息,导致传输数据量大幅增加,对传输带宽提出考验。其次,市场主流接收设备受限于处理能力,对编解码技术标准和解码、渲染的数据量都有强约束。因此,本文针对高自由度视频中的关键技术环节进行研究,取得了如下创新性研究成果:1.针对高自由度视频传输数据量过高的问题,本文设计了高效的多视点融合表达方法,去除了视点间信息的重复表达。本方法自适应地从多视点中选取出有效信息率高的若干视点并以此剔除剩余视点中已被采集的重复像素,将剩余有效像素截取为若干个子图像,送入到后续处理环节。实验结果表明,相比于传输全部源视点,本方法平均减少70.6%的传输像素数,有效信息率大幅提升。同时,在相同传输码率下,目标视图的合成质量获得1.4d B的性能增益。2.针对截取出的补充子块图像的有效组织问题,本文提出了补充视点子块的合并、放置等改进方法,更好地适配块划分、帧间/帧内预测等编码技术特点,提升了编解码的效率。实验结果表明,本方法在通测条件下分别在Y、U、V分量平均获得13.37%、3.65%和4.16%的性能增益。3.针对高自由度视频中目标视图合成渲染的实时性问题,本文提出了基于图像子区域的快速筛选方法,以子区域为单位快速判决是否有像素落入到目标视图中,筛除对目标视图无影响的子区域,降低合成渲染的计算负担。实验结果表明,针对场景视角域较大的序列,在不改变目标视图合成质量下,本方法平均筛除72.15%的传输像素,减少49.38%的总处理时间,大大提升了高自由度视频的实用性。最后,本文对各个研究点的具体内容作出了总结,并对未来高自由度视频的发展进行了展望。
其他文献
随着发动机燃油经济性要求的不断提高,以及尾气排放法规日益严格,各个汽车厂商研发出了各种新型节能技术,来解决这一问题,如缸内直喷技术、稀薄燃烧技术、选择性催化还原技术和启停技术等。随着新技术的提出,发动机部件的工作环境也随之发生变化,因此原有的可靠性检测技术不能够保证其在应用新技术下依然可靠地工作。为了有效地考核发动机各个部件在新节能技术下的可靠性,必须研发出相应的新型可靠性检测方法。本文针对启停技
可持续发展是全世界共同关注的话题,我国也不例外,已将节约资源与保护环境确立为长久执行的策略。近年来铁路运输发展已明显滞后,很难满足我国企业高速发展形成的物流增长,因此,要发挥水运的优势,优化水运物流系统,扩展水路运输量,提高物流效率,降低综合物流费用,以提高企业竞争力的目的。其中绿色船舶在水运物流系统中起到了越来越重要的作用,船舶绿色航运一方面是为了适应节约能源,降低排放量的需求,另一方面还可以在
自主导航技术是实现行星精确着陆的关键技术之一。相较于光学相机等被动导航敏感器,激光雷达具有精度高、不依赖恒星光源等优势,基于测距成像的自主导航是目前行星着陆探测方面的研究热点。本学位论文考虑行星着陆的特点,针对测量数据匹配、导航滤波估计、最优测量构型等问题,开展基于测距成像的自主导航方法研究。论文主要内容如下:首先,建立行星着陆动力学模型和观测模型,并设计了着陆自主导航方案。分别建立了着陆器轨道动
晶粒超细化是超级钢研究的基础性课题,主要的方法有合金化和变形与再结晶。本文以冷轧低碳马氏体钢为研究对象,提出在退火过程中施加应力,测定材料的硬度,采用金相显微镜、透射电子显微镜、X射线衍射、高分辨扫描透射能谱和三维原子探针等分析方法,重点探索溶质原子在应力场中的偏聚行为规律及其对析出相的影响,综合分析不同外加应力和退火温度对变形马氏体的组织演变过程的影响,并探究材料强化机制。200℃常规退火后,钢
CsPbX3(X=Cl,Br,I)系列钙钛矿纳米材料由于具备光致发光量子产率高、带隙调节范围宽、发光峰窄、制备成本低以及制备方法简易等优点,近年来被广泛关注和研究,并有望成为未来光
移动互联网的发展使得手机终端设备正逐渐替代个人电脑成为人们在工作生活中进行信息发布、社交、数字办公、购物的主要工具。在一些场景下,如营销人员需要在APP上不断发帖宣传产品,大量重复性的操作降低人们的工作效率且容易导致操作失误。同时,大数据时代的到来使APP所承载的数据信息愈发庞大,从APP中爬取有价值的数据成为当前的热点需求。虽然业界已经采用APP网络抓包的方法爬取移动APP数据,但由于数据保护技
因其独特的晶体结构,准晶自发现30多年来一直备受关注。近10年自然准晶的发现更是激发了研究者对其形成和稳定机制的探究。本文利用高压烧结法和放电等离子烧结法合成了Al-Ni-Fe和Al-Cu-Fe两个自然准晶体系的化合物,并利用单晶X射线衍射技术结合扫描电镜和第一性原理计算对一些衍生相的复杂晶体结构进行了解析、精修和研究。首先,利用高压烧结法模拟自然准晶Al71Ni24Fe5的形成过程时发现了一种与
介词一直是语法学界重要的研究课题,在近几十年的研究中,学界对介词的来源有了较为一致的认识:介词大多来源于动词。但语言不是一成不变的,在语言的使用中有部分动词会发生语法化,逐渐有介词的功能。这部分词处于动词和介词的中间状态,偏向于动词,正处于介词化的开端。学界对介词的研究多集中在已经完成介词化的介词,对这部分处于介词化初始阶段的“新兴介词”的关注不够。本文选择了三个具有代表性的新兴介词—“找”“搁”
随着高速列车车体轻量化的广泛运用,车体的弹性振动问题愈发明显,其不仅会影响舒适度指标,还会对车体结构造成破坏。通过研究车体固有属性与动态响应之间的关系,能够准确找到振动控制的目标模态,从而为车体结构的改良和优化提供可信依据。所以,车体的固有参数和振动响应成为了研究车辆振动特性的前提。目前而言,虽然针对振动系统的参数识别理论研究已相对完善,但是关于轨道车体这类大型结构的实际运用却鲜有研究。同时,由于
地震涌浪研究是一个多因素且极其复杂的研究,目前为止,针对地震涌浪的研究均忽略湖盆摩阻效应,对水深较浅且糙率大的冰碛堰塞湖而言,将会导致地震涌浪计算值偏小。鉴于国家一带一路以及西部深度开发战略的实施,举世瞩目的川藏铁路工程以飞速开展,而川藏铁路沿线存在着众多冰碛堰塞湖,且大部分位于高烈度地震区,堰塞湖溃决洪水成为对线路方案起控制作用的灾害类型,而地震涌浪是导致冰湖溃决的主要诱因之一。故本文通过以下工