远程富媒体的呈现

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:JK0803_lichunfeng
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在最近的几十年中,计算模型已经从集中式大型机计算模型转变为分布式的桌面计算模型。但是,随着个人计算机广泛使用并且保有量越来越大时,用于维护这些计算机的开销变得越来越难以控制。由于存在这样的问题并且变得越来越难解决时,人们又开始趋向于集中和更易于管理的计算模型。远程访问计算模型就是这种趋势的一个具体表现。虽然远程访问计算模型类似于大型机时代的集中计算模型,但是如今的用户已经不满足于只使用ASCII文本来表示输入与输出。远程访问系统必须有效地支持富媒体环境来满足客户的需求。达到这样的目的的关键技术就是远程富媒体呈现技术使得图形显示能够通过网络实时地传输并呈现在客户端并且支持与用户的可交互功能。随着处理器计算速度和图形芯片处理速度的快速发展,从早期简单的文本处理软件到如今绚丽的3D游戏画面和丰富的多媒体应用,富媒体内容越来越复杂,富媒体应用与人的交互也越来越丰富。丰富的富媒体内容与应用使得其在计算资源受限或网络带宽受限条件下的实时低延时编码、传输与交互带来了极大的挑战。而且在目前互联网上的异构网络环境下,远程富媒体呈现也面临着不同网络所引起的传输带宽差异、传输延时差异和带宽的波动等所带来的问题。并且,客户端设备也在计算能力、接入带宽和显示分辨率方面存在广泛的异构性。设备的异构性也给富媒体呈现服务的广泛普及带来了挑战。本文从富媒体的特点出发,针对远程富媒体呈现系统的性能要求,创新性地提出了一个高性能的远程富媒体呈现系统,并且提出了若干技术来进一步提高远程富媒体的呈现性能、减少带宽资源/计算资源损耗、提高系统对异构网络和设备的自适应性和提高用户的交互体验。本文具体的研究内容主要包括:首先,我们提出了一个完整的端到端的可交互的富媒体呈现系统。该系统能够支持高性能的远程屏幕呈现以及桌面的远程使用,即使是在具有极大显示量的多媒体应用中。在该系统中,我们为远程显示提出了一个对压缩友好(Compression friendly)的系统结构。在这个系统结构下,我们提出了一个有效的屏幕图像编码方案。该编码方案自动地根据图像块的内容使用合适的编码方法来压缩该块。同时,我们针对不同的终端设备提出了一个自适应的传输机制来减小网络带宽的消耗量而又不牺牲用户体验;针对不同的网络环境,我们提出动态地调整发送缓冲区的方法来取得网络吞吐量与数据延时之间的平衡。我们还提出了一些交互机制和网络传输机制来提高系统的可交互体验。第二,针对多客户端连接的屏幕共享系统,我们提出了一个有效的屏幕图像编码方法。对多客户端连接时所需要的多码率码流编码时,我们提出了一个一次化编码算法(one-pass encoding)。一次化编码算法使得远程主机端编码生成多个码率时只需要一次编码过程,使得主机端的编码复杂度极大的降低。特别是当远程的计算资源受限时,一次化编码算法能够较大地提高屏幕共享系统的性能。基于我们提出的屏幕图像编解码方案,我们还为基于以数据中心为基础的大规模桌面网络会议提出了一个快速的屏幕图像转码方案。第三,我们提出了使用GPU来加速屏幕图像编码的算法,以加快远程主机端的编码速度。在这个算法中,我们将屏幕图像编码端除熵编码以外的所有计算模块都转移至GPU中以有效的利用GPU强大的并行计算能力。实验结果表明,GPU加速能够大幅度地提高远程主机端的编码速度。第四,针对富媒体中的视频媒体类型,根据视频内容的特点,我们使用视频转码来达到对视频内容的有效传输并且减少网络带宽的消耗。我们提出了一个基于功率谱密度的率失真优化(Rate-distortion optimization, RDO)模型来加速视频转码的过程。在这个模型中,运动补偿的预测误差不是由块内的SAD或者SSD之和计算出来而是由输入输出运动矢量之差和预测信号的功率谱密度计算猜测出来。该方法不仅能够应用于时域的视频转码,包括对码率、分辨率、帧率的转码,而且还适用于在频域上的视频转码。本文中,我们以H.264/AVC编码标准为例,将所提出的率失真模型用在对P帧的时域转码和对B帧的频域转码。由于该模型省掉了运动估计中计算量最大的SAD/SSD计算,该率失真优化模型能够大幅度地加速视频转码的过程。第五,基于我们所提的远程富媒体呈现技术,我们构建了一个高性能的基于Proxy的手机网页浏览器。该手机网页浏览器可以提供给用户在无线和移动网络下高质量的网页显示和丰富的交互体验。我们的浏览器系统提供了一个完整的端到端的方案,该方案把网页格式转换成位图和网页对象的组合来解决原始网页对手机设备的不兼容性。为了提高用户的交互体验,我们为不同类型的网页对象设计了不同的交互机制。对象级的交互设计能够很好地提高交互性能同时能极大地减少不必要的带宽损耗。
其他文献
研究了TFA—MOD法在铝酸镧基体上制备YBCO超导薄膜时不同初始热处理温度对薄膜的影响。通过XRD、Raman光谱和SEM等手段,对生长过程中的YBCO超导薄膜结构进行表征、分析,探讨了Y
针对硫及硫化物含量配比对喷气燃料银片腐蚀的影响进行了试验研究.试验结果表明,不同浓度的元素硫,对银片的腐蚀程度不同,腐蚀银片颜色呈现不同程度的黑色;元素硫溶液中含有
随着中部崛起战略的提出,湖北要建设成为中部地区的现代物流中心。本文在分析湖北省区域物流体系发展现状及其存在的问题的基础上,探讨构建湖北省区域现代物流体系的对策。
中小企业为了更好地吸引人才和留住人才,必须建立合理的、科学的薪酬体系,尤其是要解决内部公平的问题。职位评价是现代薪酬体系设计中最基础和最重要的手段,是解决内部公平
优良的学风是高校教育的基础和保障,是衡量高校教育质量的重要标准之一。公共选修课作为高校教学中不可或缺的一部分,其学风建设也颇为重要。以石河子大学为例,在阐述选修课
基于热声理论,介绍了一种相对于传统热声振荡演示器更为简单、有效、直观的热声振荡演示装置,该装置除可调节声波振幅外,还可以调节声波的频率。该装置有助于更好地理解热声
本文总观了中国近几年的外资利用情况,针对目前我国利用外资存在的问题,如外商直接投资和国内政策的缺陷所引起的产业结构和地区结构的不平衡、对我国国际收支的影响等进行了
人腺病毒(Human adenovirus,HAdV)是引起婴幼儿急性呼吸道感染等多种疾病的重要病原体之一,本文回顾了有关HAdV的分子生物学特征、检测方法及分型、致病机制、相关疾病的临床
[摘要]股权激励制度作为一种有效的激励约束机制,已被企业广泛认同,并在众多的股份公司中付诸实施。但在我国目前企业法律制度框架下,时有限公司等类型的中小企业而言,实施股权激励是一项新兴的课题。本文针对创业阶段的中小企业实施股权激励进行分析和研究,并提出应注意的主要问题。  [关键词]创业阶段中小企业 股权 股权激励
简述了湛茂管道添加降凝剂运行的室内研究情况.考察了加剂原油的静态稳定性,对于快速降温的影响以及用加剂油护管停输进行了研究,结果表明,湛茂原油管道采用加剂换热工艺能更