复杂运动场景的交通视频消抖算法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:nymphamor
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息技术的发展、智能设备的普及,视频正成为人们记录生活内容的最主要方式。但是拍摄者们大都缺乏专业设备与技术,所以拍摄的视频大都伴有抖动现象,抖动情况在交通视频中尤为严重,会给车牌识别、目标跟踪等后续处理带来极大困难。虽然近年来关于视频消抖算法的研究得到了长足的发展,但是在处理包含复杂运动场景的交通视频中仍然有一些困难尚未解决。本文以交通视频为研究对象,就复杂运动场景给视频消抖处理过程中引入的难题进行了深入研究。视频中的抖动来源于相机本身运动中的抖动分量,因此在正确估计出相机的运动量之后,可以通过滤波等方法予以消除。但是,视频中场景的复杂化会导致相机运动量估计精度降低,尤其是在应对快速移动的场景、多运动物体和大前景物体对背景区域的大面积遮挡和由景深变化带来的视差效应同时存在的情形下,要做到对相机运动量和抖动的正确估计是相当具有挑战性的。本文针对这些挑战,尤其是交通视频中时常出现的大前景物体、视差效应、多运动物体以及由此带来的算法精度降低和耗时的问题,分别提出了具有针对性的算法。归纳起来,本文主要的工作与研究成果有如下三点:1)提出了一种基于反馈的视频消抖算法。现有的视频消抖算法在单独解决视差和大前景物体所带来的问题上,已经有了一些解决办法,但是在同时应对视差和大前景物体时,却没有一个合适的解决方案。本文通过对背景、前景和视差进行建模分析,有针对性地提出一种基于反馈的前景轨迹判别算法,该算法通过单应矩阵的重映射误差将前景物体和视差区域的特征轨迹识别出来,并通过反馈机制增强了算法在应对大前景物体上的鲁棒性。在区分开背景轨迹和前景轨迹之后,对背景轨迹进行低通滤波从而滤除抖动分量,并根据滤波前后背景轨迹的坐标将每一帧都映射到稳定视角下的稳定位置。由于基于反馈的前景轨迹判定算法可以很好地识别出大前景物体和视差区域中的前景轨迹,所以本算法可以保证对于大前景物体和视差的复杂运动场景的视频消抖效果。2)提出了背景轨迹数量增强算法。由于基于反馈的视频消抖算法是基于背景轨迹进行抖动消除,所以算法精度很大程度上取决于背景轨迹数量。而在实际中,背景轨迹数量可能会由于各种原因减少,比如当前景轨迹判定算法阈值过于严格,将会导致部分背景轨迹被错判前景轨迹;或者由于单个或者多个前景物体靠近相机、导致前景物体在画面中占比非常大而对背景区域形成严重遮挡时,背景轨迹数量也会锐减:甚至由于相机运动过快也会导致连续出现的背景轨迹数量严重降低,这些都将导致算法精度下降。为此,提出了背景轨迹找回算法、基于分块的自适应特征检测算法和自适应的特征点数量控制算法,分别用于应对上述三种情形,在提高背景轨迹数量的同时还能在一定程度上抑制前景轨迹的数量,极大地提高了算法在应对复杂运动场景时的鲁棒性。3)提出一种基于轨迹导数的前景轨迹判定算法。由于在基于反馈的前景轨迹判定算法中,需要多次计算单应矩阵,而每次计算单应矩阵都需要进行多次SVD分解,导致前景轨迹判定部分耗时严重。为此,针对基于轨迹的视频消抖算法模型,推导出轨迹导数相对于轨迹坐标的线性模型,并据此提出基于轨迹导数的前景轨迹判定算法,利用轨迹导数线性模型的重映射误差对前景轨迹和背景轨迹进行区分,并通过反馈加强其应对大前景物体的鲁棒性。本文对所提出的算法进行了大量实验,结果表明所提出的基于反馈的视频消抖算法在应对包含复杂运动场景的交通视频时的处理效果优于现有算法,背景轨迹数量增强的算法在应对复杂场景时也起到了提高背景轨迹数量和抑制前景轨迹数量的作用,基于轨迹导数的前景轨迹判定算法在保证判定精度的前提下能够大大降低前景判定算法的执行时间。
其他文献
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
二进制代码逆向分析是一种针对二进制代码的程序分析技术。它在源代码无法获取的情形中至关重要。如在恶意软件检测与分析中,由于恶意软件作者往往不公开源代码,二进制代码逆
类比手法在中学教材中是一种常见手法,然而在教学实践中,类比却没有得到足够的重视。教材分析时,我们对类比现象不敏感,对类比的意义认识不足;作文教学时,又不懂得类比思维的运用。
“云计算”(Cloud Computing)是一种新型计算模式,它将计算资源存储在可配置的计算资源共享池中,通过便利的、可用的、按需的网络访问计算资源。由于云计算服务商在云计算中
现今信息时代中,文字、声音、图像等几乎所有的信息载体均以高维非结构化数据的形式进行存储、处理和传输。但是,高维数据难以直接被现有的机器学习、数据挖掘和数据分析算法
中隔墙施工质量是隧道质量控制要点和难点之一,同时因项目工期紧张,且连拱隧道主洞左右线开挖须在中隔墙施作完成并达到强度后,故中隔墙的施工进度直接制约着项目施工工期。
本区大地构造位置位于东昆仑南坡俯冲碰撞杂岩带(KSPZ)。成矿区划属雪山峰—布尔汉布达华力西—印支期钴、金、铜、玉石(稀有、稀土)Ⅲ13成矿带,地层区划属秦祁昆地层区东昆
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
随着数字录像设备的普及以及网络技术的发展,视频逐渐成为人们记录个人生活、并进行沟通的一种重要形式。每一天都会产生大量的视频,这些视频内容的范围很广,包括新闻、体育