适用于高清视频的帧率上变换算法研究与实现

被引量 : 3次 | 上传用户:liweimin90
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于多媒体技术的迅猛发展,市场上出现了多种不同帧率的视频源,不可避免地需要在上述视频源之间进行帧率的转换。帧率上变换就是将低帧率视频转换为较高帧率视频的一种技术。同时,随着人们对视频质量要求的不断提高,高清视频应用越来越普遍。因此,研究适用于高清视频的帧率上变换算法显得尤为重要。目前,帧率上变换算法的几个热门应用包括:消除液晶电视在显示运动画面时的抖动及运动模糊,恢复低比较率视频系统的原始帧率,慢运动回放,可分级编码等。目前,大多数的帧率上变换方法基于运动补偿技术,可以获得更加平滑流畅的观看效果。运动补偿中使用的运动矢量可以是编码端传输过来的,也可以在解码端重新进行运动估计获得。本文研究的是在解码端重新进行运动估计的帧率上变换算法,可以应用在高清视频系统中。本文的主要内容如下:1.运动估计主要包括单向运动估计和双向运动估计两种框架。在单向运动估计框架下,提出了前向后向相结合的运动估计算法。该方法将前向运动估计和后向运动估计相结合,提高了运动估计器的准确性。在此基础上,提出了一种帧率上变换算法——FBFRC (Frame Rate Conversion Based on Forward and Backward Motion Estimation)。2.在FBFRC中,提出了一种基于中值滤波的重定时方法。重定时方法用于生成待插值帧的运动矢量场。所提出的基于中值滤波的重定时方法有效避免了传统方法在插值时产生的“空洞”与“重叠”问题。3.在FBFRC中,提出了一种遮挡检测的方法。该方法通过分析相邻两物体所有可能的运动关系,得到被遮挡区域、显露区域和非遮挡区域对应的运动模型,从而对图像进行上述区域的划分。在运动补偿时,对被遮挡区域和显露区域进行单向插值,对非遮挡区域进行双向插值,可以有效解决不处理遮挡问题时插值图像中物体周围的光晕现象。4.在双向运动估计框架下,提出了两种运动估计方法:频域与空时域相结合的运动估计,以及一种双向运动估计方法。频域运动估计采用相位平面相关法,将该方法与空时域运动估计相结合,可以显著提高运动矢量的准确性。提出的双向运动估计方法通过自适应的运动矢量更新和运动矢量约束,有效地提高了运动矢量的准确性和一致性。在两种运动估计方法的基础上,分别提出了两种帧率上变换算法——FSTFRC (Frame Rate Conversion Based on Frequency and Spatio-Temporal Motion Estimation)和BLFRC (Frame Rate Conversion Based on Bilateral Motion Estimation)。5.在BLFRC中,提出了一种运动矢量场的平滑方法。利用当前块某个邻域内的局部全局运动进行平滑,该局部全局运动由运动矢量直方图得到。运动矢量平滑更正了运动估计生成的某些错误矢量,增强了运动矢量场的一致性,改善了插值图像的质量。6.针对帧率上变换算法在实际应用中遇到的以下三个问题分别给出了解决办法。(1)输入视频源为电影模式视频时,输入图像中包含一定数量的重复帧,经过帧率上变换后,重复帧数量更多,导致播放时出现抖动。提出的解决办法是:通过电影模式检测,剃除掉重复的图像,再进行帧率上变换。(2)当输入视频源中存在文本时,在文本区域估计出的运动矢量容易受周围非文本区域运动矢量的影响,从而造成估计错误,引起插值图像质量下降。针对此问题,提出了滚动字幕的处理方法以及静止文本的检测与处理方法,提高了文本区域运动估计的准确性,改善了含文本视频的插值图像质量。(3)当输入视频源发生场景切换时,基于运动补偿插帧的帧率上变换算法会产生严重失真的插值图像。针对此问题,提出了一种基于匹配误差的场景切换检测方法,当检测出场景切换时,使用帧重复或插入平滑帧等方法替代运动补偿进行帧插值,获得更好的视频观看效果。
其他文献
电网建设项目全寿命期管理是指对项目全寿命周期内各个阶段各项活动进行全面、全过程的管理,是管理上的一项创新。本文以全寿命周期管理为理论基础,概述了电网工程项目建设与
以钛酸钡或钛酸钡基固溶体为主晶相的铁电陶瓷,具有较高的介电常数,良好的铁电、压电、热释电性能。而纯钛酸钡的居里温度在120℃左右,限制了其在室温下的应用,且以单体形态存在
距离2020年实现全面小康社会的时间越来越近,全国扶贫进入攻坚期,总结前一阶段的经验,更有效地开展精准扶贫,成为目前面临的重要问题。中国农业科学院农产品加工研究所作为农
在找矿实践中,勘查地球化学数据是重要的信息源,地球化学数据处理的目标之一就是从大量观测资料中,在关系复杂的情况下,用数学方法从地球化学原始数据中提取出有用的信息,揭示指示
随着我国电力网络农网和城网改造的深入进行,电力部门的供电质量得到普遍提高,线损进一步降低,电力输送更为便利。按照国家电力管理部门的要求,我国城镇居民用电已逐步实现了
湖泊是内陆重要的水资源,随着全球水资源紧缺,湖泊保护和污染治理工作也变得尤为重要。目前湖泊的污染问题主要有水体富营养化以及藻类大面积暴发,位于内蒙古境内的淡水湖乌梁素
近年来,随着我国国民经济的不断快速增长,存款利率不断下调,投资型寿险业务量逐渐增大,这种既具有保险功能,又具有投资功能的创新型人寿产品,逐渐演变为客户和保险公司风险共
近几年随着电动汽车不断的普及,电动汽车充电站作为电动汽车能源供给的基础服务设施得到了大规模发展,但是目前电动汽车充电站的建设还处于示范运营阶段,与之配套的监控系统所监
当前,中国的刑事证人保护制度还不够完善,特别是在司法实践层面,导致证人作证不积极。2012年《刑事诉讼法》修正案虽然取得了一定进步,但在实践中仍应从建立专门的刑事证人保
与传统块状贵金属相比,贵金属纳米粒子的尺寸处于纳米尺度,在电学、光学、催化等方面展现出优异的性能。而对于贵金属合金纳米粒子,不同金属之间具有协同效应,催化等性能远远优于