基于内容的视频分析与流化技术研究

来源 :清华大学 | 被引量 : 0次 | 上传用户:suc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文以视频内容为出发点,根据视频内容对观测者的相对重要程度,将视频流表达成基于内容优先权的传输结构,提出了结合视频分析和流化传输技术、以视频内容为中心的普适的多媒体访问框架。在研究基于内容的视频分析、编码和流化传输技术基础上,对一些关键问题如:视频镜头的组织本文、场景检测及基于内容检索中的特征选择和相似距离定义、基于内容的细粒度可扩展编码码率分配及流化传输、内容增强的MPEG-4编码码率控制等作了深入研究,提出了一些创新的思想和方法。具体内容包括: 1、提出了两个场景检测(镜头聚类)算法:(1)最佳—优先概率模型的镜头合并算法,该算法将视频镜头看作隐性状态变量,将镜头之间的切换看作状态改变的转移概率,利用最佳—优先的概率合并模型对视频镜头进行聚类;(2)滑动窗口的场景检测算法,该算法考虑到同一场景中的视频镜头不仅具有很相似的视觉特征,而且在时间轴上相隔很近,提出了一种时间限制的镜头相似度度量方式,通过考查滑动窗口中镜头序列之间的这种相似度,来判断视频场景的边界。实验和分析表明了这些方法的可行性和有效性。 2、提出了基于NFL的视频镜头检索算法:该镜头检索算法克服了常规算法中将视频序列中关键帧看作是独立图片的缺点,认为连续的视频帧中存在着内容相似的关系,而特征线则代表了这种关系,并且极大地减少了数据处理量。根据视频的特点,又提出了改进的NFL和与关键帧提取相结合的视频镜头检索算法,并且用于实际的视频镜头检索中。实验结果显示基于NFL的镜头检索方法不仅可以有效地对视频镜头中关键帧进行抽取,而且可以提高镜头检索的准确率。 3、提出了基于内容的细粒度可扩展编码码率分配及流化传输控制策略。(1)提出了一种基于内容的FGS视频编码的码率分配方案,研究了视频内容与FGS可扩展编码中增强层率失真函数的关系,根据视频内容的重要性为视频单元分配合理的比特数。(2)提出了一个基于内容的视频流化码率控制策略,该策略首先对FGS码流建立分层的优先级传输模型,然后利用与视频内容相关的可伸缩的码率调节机制模型对视频进行裁剪。 4、提出了一种内容增强的MPEG-4编码码率控制算法,该算法的基本思想就是在不用对视频对象作精确分割的前提下,只需要对视频对象作大致分割,然后根据视频对象的重要性对视频对象有选择的进行增强。该算法以提高视频主观质量为目的,所以能够在有效的传输带宽下尽力保证用户接收视频的主观质量。 5、通过对基于内容的视频分析、编码及流化技术的研究,本文设计并实现了一个UMA系统的原型。该系统体现了以视频内容为中心的普适多媒体访问,由一个基于MPEG-7标准的视频分析平台TVFI和一个内容自适应的视频流化服务器CAVS组成。该系统能够提供视频节目的导入、视频结构化分析、底层特征提取、特征描述等视频分析功能,以及根据用户接入端设备能力、接入带宽以及个性化需求等因素,为用户提供视频内容自适应的、与用户接入端设备能力和网络带宽相匹配的视频流服务。
其他文献
该论文以研究Agent技术在B2C网站中的应用为核心,构建了一个功能比较完备的智能购物系统.它能够根据用户的浏览过程和消费行为,建立用户个性化模型数据库,预测用户消费行为,
在信息化迅速膨胀的海量数据时代,数据的存储、管理以及分析处理等方面面临诸多挑战与机遇。其中在数据中存在着大量不确定性因素,这些不确定性带来了一定的概率存在,使海量
随着互联网技术的迅速发展,万维网上的可用信息越来越多,并且仍然在迅速地增长,如何发展数据库技术使之能对Web数据进行有效的检索和查询,已经成为当今网络和数据库领域共同关心
该文首先研究了工作流的基本情况、发展历史;对当前工作流研究情况进行了分析和对比;阐述了当前国内外工作流管理技术的现状和未来发展趋势;介绍了WfMC提出的工作流参考模型
随着互联网的迅猛发展,网上的数据每日海量增加,用户要想在网上搜索到自己希望的信息已经越来越难。为此,出现了搜索引擎等一系列服务,帮助人们快速准确地找到所需信息。但是
在计算机领域中,随着计算机技术和全球信息网络技术的飞速发展,组件式网络技术已经成为当今软件技术的热潮.本文主要探讨COM+组件技术和先进的三层构架体系WindowsDNA及它们
该文的工作主要在以下几个方面:1、概述了数据仓库的概念,详细地叙述了数据挖掘技术,包括概念、处理过程、系统结构、分析模型、常用技术,并针对该文用到的聚类分析中的K-Mea
随着网络技术和网络应用的发展,Internet已经由原来的一个以静态内容发布和获取为主的信息交换平台转变为了一个全球范围内的基础信息设施,用来提供应用所需的信息资源、计算资
该文就是针对分散副本的管理问题,参考当前国际上的最新研究成果,结合目前的试验条件,设计和实现了一个副本管理服务原型系统RMS.首先简略介绍了数据网格的基本理论,之后详细
该文对地理信息图出版系统建模中的分析模式进行抽取,提出了容器层次结构模式、数量模式、数据格式模式、资源库模式、权限管理模式、统计分析模式、矢量图元模式、文档模式