复杂场景视觉目标跟踪方法

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:tzhblyh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
计算机视觉的主要目标之一是使计算机能够跟人类视觉系统一样,具有运动感知、物体识别和场景理解等基本功能。视觉目标跟踪就是为了实现运动感知功能,近二十多年一直是计算机视觉领域最热门的研究课题之一。视觉目标跟踪广泛应用于人机交互,视频监视和交通场景理解等领域。尽管已经提出了许多目标跟踪方法,但是由于部分遮挡、背景杂波、照明和视点变化等因素,设计鲁棒的跟踪方法仍然具有挑战性。本文研究工作仅涉及单目可见光图像、短期、无模型、单目标和因果关系跟踪,主要贡献包括如下三个方面:(1)针对基于子空间学习的跟踪方法忽略背景信息的问题,提出了通过背景对齐跟踪部分遮挡目标的跟踪方法(POBA),旨在搜索具有精确遮挡掩码的最佳候选状态。基于子空间的跟踪方法通常使用一组基向量重构候选状态,并选择具有最小重构误差的候选状态作为跟踪结果。众所周知,部分遮挡会严重影响重构结果的准确性,并且用含有遮挡区域的样本来更新模型也将导致跟踪器漂移。现有方法要么不考虑部分遮挡问题,要么仅通过当前观察和重构结果识别遮挡区域。遮挡区域通常来自先前帧中的背景区域,现有方法往往忽略这个事实。POBA跟踪器将当前观察结果视为目标外观和遮挡区域的组合。目标外观由一组基向量建模,通过增量主成分分析方法从灰度图像上学习。在两个连续帧之间背景几乎相同的假设下,POBA从上一帧图像中产生遮挡区域。此外,由于大多数候选状态与目标差异显著,设计遮挡掩码对其进行过滤可以降低计算成本。POBA跟踪器在两个挑战性数据集上进行了验证评估。(2)针对基于在线多示例学习跟踪方法没有区分地更新和选择弱分类器,提出基于可靠组件的在线多示例学习跟踪方法(OMRC)。基于多示例学习的跟踪方法通常在boosting框架下训练判别式分类器,其中弱分类器是从目标的部分区域中学习的,所有分类器在更新外观模型时都会进行更新。然而,由于物体的形状不规则或存在遮挡,某些不属于目标的组件不应当作为学习样本。相反,从这些组件中学到的区分性弱分类器可能致使跟踪器漂移。为了克服这个问题,OMRC在跟踪目标的同时,保留背景和目标模板,通过将当前跟踪结果与两个模板进行比较,可以得到像素是否属于物体。对于一个组件,属于目标像素比例高于设定阈值即被认为是可靠组件。此外,为了更好地表示图像,OMRC使用HOG特征和直方图特征代替了广泛使用的Haar-like的特征,并设计了一种在线学习方法训练弱分类器。OMRC跟踪器的鲁棒性以及OMRC跟踪器中每个环节的有效性在OTB2015和Temple Color数据集上进行了验证评估。(3)针对基于孪生网络的跟踪方法不能适应目标外观变化及区分相似物体,提出结合离线学习的相似性度量和在线分类模型的跟踪方法(SMDC)。基于孪生网络的目标跟踪方法通过离线训练获得相似性度量标准,在跟踪过程中仅仅依赖第一帧的目标模板,存在因忽略目标外观变化以及不能有效区分相似干扰物造成丢失的情况。SMDC通过增加线性判别分支捕获图像序列在跟踪过程中的信息,在跟踪过程中在线学习少量相似样本,与离线学习的孪生网络互补。此外,现有孪生网络方法在提取目标模板时,保持目标的宽高比不变,没有利用目标模板的宽高比信息。然而不同宽高比目标模板预测同一候选块,难以得到一致且正确的响应和位置回归。SMDC在目标模板特征提取过程中增加一个目标模板对齐层,获得统一宽高比的目标模板。该方法的鲁棒性在多个数据集上进行了验证。综上,本文针对视觉目标跟踪中遮挡和相似物体判别问题进行了相关研究。对于遮挡问题,分别基于子空间学习方法和多示例学习方法,构造背景模板。在基于子空间学习跟踪方法中,为目标重构提供参考背景获得更准确的重构结果。在基于多示例学习跟踪方法中,筛选可靠组件用于更新和集成跟踪器,排除来自非目标区域的干扰。对于相似目标问题,基于孪生网络的跟踪方法引入线性判别分支,捕获跟踪过程中的信息以有效区分相似物体。所提方法的鲁棒性均在多个公开数据集上进行验证和评估。
其他文献
研究背景:心力衰竭是心脏泵功能障碍,以致心输出量减少到不足以适应全身组织代谢需要的一种病理过程,常伴随着适应不良性心肌肥厚、心肌纤维化和心肌细胞凋亡等。近年来,利用高通量RNA测序技术已证实多种非编码RNA(non-coding RNA,nc RNA)在心衰过程中发生显著的差异表达变化。微小RNA(micro RNA,miRNA)是nc RNA中研究比较广泛的一类小分子RNA。既往文献报道miRN
当前,由经济发展导致的全球性环境恶化问题日趋严峻,寻找经济建设与环境保护的平衡点、实现经济的可持续发展已经成为全世界大多数国家的共识。传统经济学理论认为,环境保护具有正外部性,因此政府是环境治理的主要推手。然而,随着近年来绿色信贷业务的兴起,市场在环境治理上发挥的作用已然愈加明显。环境治理正逐渐由政府单一决策向政府、社会协调的模式转变。中国长期践行可持续发展战略,而在经济高质量发展的今天,厘清经济
气液两相流广泛存在于核能、化工等领域。微通道气液两相流由于其通道的尺度减小到微米范围,产生了不同于常规尺度的流动和传热传质现象:气泡的界面受壁面限制,让气泡的精准操控成为可能;高的比表面积提高了壁面处相变传热效率。为了实现精准可控的化学反应过程,可将微流体与化学反应结合在一起。其中,一些气液反应也需要这种精确的流量控制,然而由于通道尺度的限制导致了两相混合困难,反应只在界面处发生,这会降低反应速度
离散随机系统因为其在计算机技术、无线通讯网络、系统生物学等领域的广泛应用而备受学者关注,而离散随机系统的控制和滤波问题也因此成为控制理论的一个热门研究方向。本文针对线性离散随机系统,引入了其三种二阶矩状态转移矩阵,并通过所得的状态转移矩阵的形式,给出了系统二阶矩有限时间稳定、均方稳定、均方渐近稳定的充分必要条件。并且建立状态转移矩阵与新型Lyapunov函数之间的联系。随后该方法被成功地推广到线性
制造企业高质量发展日益成为各界高度关注的议题,然而如何推动效率变革和动力变革却成为难以破解的问题。在当前,新兴数字技术正广泛地变革生产制造方式,数字赋能正成为建立竞争优势的关键来源,驱动原有商业模式的优化,促进商业模式的拓展,甚至重构价值主张和价值创造逻辑,为企业发展注入新活力。然而,数字赋能如何赋能以及如何影响商业模式创新的问题仍未获得充分探讨。究其根源,新兴数字赋能现象的理论化程度较低是关键所
环氧树脂基混凝土是以环氧树脂为粘接剂、级配碎石为骨料的一种聚合物混凝土。由于拥有优异的力学性能和良好的耐候性,环氧树脂基混凝土得到了工程界的青睐,在桥路面铺装、铁路轨枕和机械基础中得到了应用。在这些工程实践中,环氧树脂基混凝土普遍处于复杂的应力状态和恶劣气候环境中。研究环氧树脂基混凝土在多轴荷载和气候条件下的损伤行为,对充分认识环氧树脂基混凝土的失效过程和机理,具有重要的意义。基于细观结构的数值仿
改革开放以来,沿海经济发展迅速,河口及近岸海域生态破坏和环境污染问题日益严峻。珠江流域是我国第二大流域,珠江河口是粤港澳大湾区核心区,区域内人口密集工业发达,在水安全方面面临诸多问题。诸如:由重金属、持久性有机污染物及微塑料等几大类污染物造成的水环境污染问题;由氮、磷等营养盐含量过高,使得水葫芦肆虐,造成的水生态问题。这些污染物对水质退化造成很大影响,当前自来水厂的处理工艺不能有效去除这些污染物,
锂硫电池因其高能量密度、低成本以及环境友好型等优点使其有望成为下一代新型电池体系。尽管具有这些优势,锂硫电池在实际应用中仍旧面临着巨大的挑战。首先,硫和放电最终产物硫化锂均为电子和锂离子的绝缘体,这显然不利于硫的高效利用。其次,硫正极在电化学循环过程会产生一系列易溶解于有机电解液的中间产物多硫化锂。由于多硫化锂溶解引发的穿梭效应,导致活性物质的损失和差的循环稳定性。此外,硫正极在循环过程中产生的巨
近年来,有机光伏器件由于具有质轻、低成本、可大面积溶液加工等优势,引起了全世界很多课题研究组的关注。随着新型给体材料的设计与合成和非富勒烯受体材料的不断开发,有机光伏器件的光电转换效率逐年提高,单结器件最高效率已经超过18%,为未来大规模商业应用奠定了基础。水/醇溶有机共轭材料,因其独特的溶解性,能够很好的避免多层薄膜加工时的互溶问题,以及其优异的界面修饰性能也被广泛的研究。在本论文中,本人主要研