论文部分内容阅读
个人通信是人类通信的发展目标,可以实现任何人(Whoever)在任何时间(Whenever)、任何地点(Wherever)与任何人(Whoever)进行任何种类(Whatever)的信息交换。然而,以因特网、无线信道为代表的应用环境是一种时变信道,而且容易发生误码,如何提高视频码流抗传输误码的能力,提高视频恢复质量,成为无线移动环境下视频传输应用中急需解决的问题。传统的视频差错控制技术一般采用信号处理的方法,把视频流看成一个二进制比特序列,没有考虑视频本身所包含的语义信息和提供信息的重要程度的差异。本论文从视频内容分析的角度出发,提出了易错信道下基于内容的差错控制框架,发掘视频内容、信道差错与视频质量之间的相互关联,把内容处理、网络传输和编码技术结合起来,综合解决视频通信中的差错控制问题。论文阐述了基于内容的差错控制方法的体系结构,提出内容描述模型,针对不同层次的内容特征,提出了相应的差错控制方法,并进行了实验测试分析和效果评价。主要的研究贡献包括:!对基于内容的差错控制方法的体系结构进行研究,在内容特征的层次化结构的基础上,分析了基于内容的差错控制方法的框架、特性、分类。通过研究不同视频特征的属性,结合人眼视觉系统(Human Visual System HVS)的生理特性,将视频内容特征分成人脸、运动和视觉显著性特征(比如颜色、密度、方向等)三个层次,总结和归纳出一种视频内容描述模型。在这个模型框架下,视频被分割成具有显著内容特征和逻辑意义的视频单元,对每种类型的视频单元根据其内容特征采用不同的差错控制方法,可以获得良好的差错恢复效果。!研究了针对人脸特征的差错恢复方法。由于视频中出现的人脸具有稳定性,连续性等特点,同时考虑到无线移动信道由于误码率高而引起差错传播问题,所以采用帧内编码宏块刷新的方法。一方面由于人脸区域的连续性使帧内编码方法的数据量不大,另一方面采用这种方法可以有效控制信道误码引起的差错传播。!研究了基于运动特征的差错隐藏方法。当解码端发现宏块丢失时,根据人眼的视觉特性,对于具有不同目标运动速度的视频单元采用不同的差错隐藏方法,能够有效地隐藏误码引起的失真。!研究了对于颜色、密度等显著性区域的差错隐藏方法。由于低层显著性区域分散且数目不定,采用数据分区的差错隐藏方法既可以节约网络带宽,又可以保证用户关注的信息不丢失。!结合主观视频质量评价方法和客观评价方法的特性,提出基于内容的视频质量评价方法,以量化的形式体现人眼视觉系统的主观视觉感受。论文给出了针对不同层次特征的差错控制算法的测试和实验结果,并进行了评价和讨论。论文最后给出研究内容的小结,并对未来基于内容的差错控制问题进行了展望。