抗遮档的光流场估计算法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:leonmalay
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
光流场估计是计算机视觉领域的基础研究内容之一,其在视频分割、物体跟踪和三维场景重建等方面均有大量的应用。历经四十余年的发展,光流场估计研究取得了长足的进步。随着应用场合的不断扩大和人们对高精度光流场估计需求的不断提高,近年来光流场估计又成为领域的一个研究热点。光流场记录了物体在图像平面上投影的移动。按照所使用图像帧的数目进行分类,光流场估计可分为基于两帧图像的和基于多帧序列图像的两大类。本文主要研究前者,针对存在遮挡的场景,尝试提出基于前后两帧图像的、鲁棒的光流场估计算法。首先,本文针对一类光流场估计算法中的中间扭曲图像(warped image,简称中间图像)生成问题进行了研究,提出了中间图像的合成和校正算法。已知微分法是光流场估计中最基本的算法之一,虽然中间图像在所述算法中仅是一个阶段性结果,但其在计算过程中起着承上启下的关键作用。研究发现因算法本身的问题,生成的中间图像中会出现场景中其它地方的物体或物体的部分结构,这样的“鬼影”区域会给后续的光流计算带来误导,必须加以纠正。为此,本文首先对所使用的数据库中前景运动物体和背景区域进行了统计分析,提出了一种基于场景先验的“鬼影”区域定位算法。接着,本文从“鬼影”区域的定义出发,利用像素对比策略提出了一种基于相关(在中间图像和运动前图像之间进行相关运算)的“鬼影”区域定位算法。然后,通过对中间图像各像素之间运动模式进行分析和梳理,提出了一种基于运动关系的“鬼影”区域定位算法。最后,对于中间图像“鬼影”区域的像素填充问题,本文提出了一种基于运动前图像的校正算法。在多个数据集上的实验结果表明,本文提出的中间图像合成算法能有效消除“鬼影”区域,从而为得到正确的光流场估计结果提供支持。进一步,本文对光流场估计中的遮挡问题进行了研究。通过对比分析可以发现中间图像中的“鬼影”区域与由前景物体运动产生的遮挡区域之间存在极高的关联性,因此即可利用中间图像的“鬼影”区域定位信息获得遮挡信息。本文首先以中间图像为纽带,提出了一种遮挡推理和光流场估计的迭代优化算法。然后,本文利用多种信息提升了遮挡推理的准确性,提出了一种遮挡推理和光流场估计的分步优化算法。为了验证方法的有效性,本文开展了相关的光流场估计实验研究。实验结果表明,我们提出的光流场估计算法是有效的,能够在存在遮挡的情况下获得场景正确的光流场估计结果。最后,本文对基于深度学习框架的光流场估计问题进行了深入研究。以现有卷积神经网络结构为基础,融合传统算法优势,本文提出了基于先验知识的光流场估计算法。光流是对运动的描述,而运动边缘一般会出现在运动前图像的图像边缘中。因此本文首先将运动前图像的边缘信息引入网络,提出了基于边缘先验的光流场估计算法。卷积神经网络是对复杂映射关系的学习和表达,而遮挡区域作为其中的异常值,对映射关系的学习有着极大的干扰。为此,本文提出了一种基于遮挡先验的光流场估计算法,将遮挡推理的结果同时引入输入图像和损失函数中以抑制遮挡现象对网络模型的影响。实验结果表明,融合先验知识能有效提升光流场估计的精度。
其他文献
<正>消化道肿瘤是一种常见病,也造成人类死亡的主要死因之一,全球每年死于消化道肿瘤的病人高达数百万.消化道肿瘤的有效治疗在于早发现、早治疗.近年来内镜技术的飞速发展,
“居者有其屋”是人类生存和发展的基本追求,也是判断一个国家经济社会发展水平和文明程度的重要标准。1998年以来,为了顺应市场经济体制改革的总体要求,我国政府开始了城镇
中职学生德育教育在学习兴趣、教学内容、教学模式、师资力量方面均存在着不容忽视的问题。解决策略主要是:深化中职学校教育培养模式改革,促进德育教育均衡发展;加强管理,完
随着我国经济建设的不断发展,人们越来越重视自身的文化生活。而基层的文化志愿者服务作为公共文化服务体系中重要的参与者,对于文化的传播、增强群众的文化知识等方面具有重
众所周知,电影不仅是一种艺术品,也是一种商品,因此,其名字翻译就显得十分重要了.本文将讨论一些电影名字翻译的技巧和一些影响其翻译的因素。
随着内河航运业的不断发展,内河货物吞吐量日趋增加,水上交通事故的风险也随之上升,内河监控系统的应用受到了大家的广泛关注。船舶检测、船舶跟踪作为内河监控系统的重要组成部分,检测算法从监控图像中获取船舶的坐标信息,并将其传递给跟踪算法,由它对检测到的船舶目标进行正确跟踪,为后续判断船舶的行为提供有效依据。传统的船舶检测方法对实际复杂的内河背景环境的鲁棒性普遍较差,难以满足实际场景的需求。目前,卷积神经
目的整理分析“治未病”在《金匮要略》杂病诊疗中的应用;从褪黑素角度探讨“知肝传脾,当先实脾”之生物学机制。方法一《金匮要略》“治未病”应用分析采用文献学的研究方法
依据美国心理学家桑代克的"尝试错误"理论,提出试误建构教学法,通过学生尝试,甚至错误的尝试,逐步建构学生对分析化学中的"量"的概念、"度"的意识、"理"的形成。
城市燃气管道的安全与居民的日常生活密切相关。一个城市想要取得稳定发展,必须要加强各个方面的城市管理。燃气管道的安全管理就是其中重要的组成部分。随着我国城市化进程
随着生活水平的日益提高,人民对美好生活的向往日益增强。而陶瓷作为一种和百姓日常生活联系紧密的器物,在生活中有着重要的地位,更有着物质和精神的双重属性。一套美观、实用、有文化内涵的日用陶瓷可以满足“用”的物质层面需求和“美”的精神层面需求,并给使用者带来愉悦的体验,从而提高人民生活质量和日常生活的幸福感。本次“青韵”日用瓷产品设计,即是以青釉的颜色表现、质感表现为切入点,试图找寻当代日用陶瓷设计和极