基于用户观看行为预测的全景视频高效编码与传输

来源 :浙江大学 | 被引量 : 0次 | 上传用户:sb0077
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
全景视频可以为用户提供360度的视频内容,带来沉浸式的观看和交互体验。然而从云端服务器传输一段高质量高分辨率的全景视频到用户端所消耗的网络带宽是极其巨大的,并且由于某一时刻只有部分的视野区域可以被用户观看到,云端发送全视角高质量的全景视频实质上是对带宽的一种浪费。因此,本文针对全景视频的高效编码与传输方案进行了深入研究。一方面,本文利用HEVC编码标准中Tile可独立编解码的特性,提出了一种多质量级Tile选取方案,基于线性回归模型预测用户注视点运动路线,再结合质量偏差反馈为全景视频不同区域的Tile选取不同的编码质量后传输。相较于全视角传输单一质量Tile方案,本文方案在相等客观质量下平均可以节省12.16%的码率,最高的序列可以节省近30%。另一方面,多质量级Tile编码与传输方案需要实时地获取真实用户的观看行为并进行预测,因此编码性能与用户端观看行为紧密相关。本文进一步探索在无需获取真实用户观看注视点的前提下,对虚拟用户观看全景视频不同区域的感兴趣程度进行预测。本文所提出的基于混合密度网络的虚拟用户观看注视点概率分布预测模型MDNP,相较于一种基于视频内容显著性对虚拟用户观看注视点位置进行预测的模型DHP具有更好的预测性能,本文方案所预测的概率分布图在批量用户的真实观看路径显著度上提升了0.21。根据预测的概率分布,本文进一步建立了观看概率值与量化参数的映射关系,实现全景视频的质量非均匀分配编码。基于MDNP模型和DHP模型的预测结果进行编码,本文方案相比基于DHP模型的方案在相等客观质量下平均可以节省0.72%的码率。此外,对本文实现的两种高效编码方案进行了比较,相较于多质量级Tile编码与传输方案,基于观看注视点概率分布的质量非均匀分配编码方案在相等客观质量下平均可以节省33.67%的码率。最后,对全文进行了总结与展望。对多质量级Tile编码与传输方案和基于观看注视点概率分布的质量非均匀分配编码方案的优缺点和应用场景进行了简要讨论。
其他文献
导管架平台与上部组块在常规上采用直接焊接的方式,针对导管架与临时钻井甲板的连接处,考虑钻井完成后临时钻井甲板需要拆除,从缩短海上施工时间,节省材料的方面考虑,提出了新型的
哲学是研究物质、意识实在的本质;研究意识的符号化规则、规律;研究意识的逻辑化规律;研究认识的本质和方法的人类智慧。第一章意识起源意识的起源也就是人类的起源,也就是哺
该文以垦利10-4油田开发项目为例,创造性地提出了一种标准化平台设计法的概念,并介绍了标准化设计的依据和在垦利10-4 WPHA井口平台设计中的实际应用过程,分析了使用标准化设
该文介绍了张力腿平台(TLP)NODE结构强度分析的主要方法,使用ANSYS软件对传统张力腿平台中,连接浮筒与立柱的关键结构——NODE进行有限元模拟,并通过在位工况,对一年一遇、百年一遇
手性分子是很多药物的重要组成单元。在过去几年中,手性分子的合成受到了越来越多的关注,而化学法合成手性分子需要用到过渡金属催化剂和复杂的手性配体。化学合成不仅反应条件苛刻、所用的手性配体价格昂贵,而且会引起一系列的环境污染问题。因此,在温和条件下通过绿色方法合成手性分子仍然是目前化学研究的热点。本论文主要开展了以下几方面的研究。脂肪酸脱羧酶FAP(WT-FAP)是近年发现的一个光敏酶,可以在光激发下
为扎实做好新型冠状病毒肺炎疫情防控工作,阻断可能的传染源和传播途径。丹巴县林草系统充分发挥党支部的核心领导作用,全局党员干部和全局职工迅速把思想和行动统一到习近平
对南海某气田海管受损后的损坏部分进行局部修复,使用2个阀组和1段海管对损坏部分进行更换。通过前期不断优化工程设计,确定使用饱和潜水支持船携带排水干燥惰化设备,通过下
在现存的大量采用内廊布局方式的建筑中,走廊中的天然采光通常受到忽略,造成即便室外拥有良好日照,走廊中也长时间采用人工照明以满足使用要求的状况。不仅能耗严重,而且对人
采用培养试验研究了铅胁迫对紫花苜蓿(Medicago sativa L.)种子萌发与幼苗生长的影响。结果表明,在Pb2+浓度0~100mg/kg范围内,Pb2+对种子的发芽率和发芽势的影响差异不显著,二者均
并购是市场经济下企业扩张的重要途径。为顺应企业战略发展需求,实现产业升级,越来越多企业选择并购。互联网行业的并购进入迅速发展期,一些互联网企业通过并购提高公司市场占有率,增加用户粘性,提升企业核心竞争力。然而,并购后企业绩效如何评价是企业面临的一个重要问题,尤其是对于“轻”资产的互联网企业而言。本文对互联网企业的并购绩效进行研究分析,选取2018年“阿里巴巴”并购“饿了么”事件为研究对象,运用平衡