基于时空上下文建模的目标检测与行为识别

来源 :合肥工业大学 | 被引量 : 0次 | 上传用户:khsim
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
上下文关系建模是计算机视觉中一种重要的研究方法,可以显著增强图像或视频中神经网络模型学习到的特征。上下文信息按特征维度主要可分为空间上下文与时序上下文,在2D图像任务中,模型主要提取图像中的空间上下文信息;在3D视频理解任务中,时序上下文能更有效地辅助建模远距离帧间的关系。本文主要围绕图像目标检测与视频行为识别任务中的时空上下文建模展开研究,深度探索了时空语境信息对模型检测性能的影响。本文的主要贡献如下:(1)针对目标检测任务中的空间上下文建模,本文提出了一个端对端的空洞可变形特征金字塔网络来联合提取空间和语义上下文信息。对于空间上下文,通过并行组合不同空洞率下的空洞可变形卷积,设计了一个多尺度空洞可变形卷积模块来学习各种多尺度可变形目标的特征。对于语义上下文,设计了跨特征关联和共现推理两个模块,分别从关联特征和目标共现两个方面构建了两个上下文图结构。(2)针对行为识别任务中的时序上下文建模,本文提出了两个网络模块:通道级运动特征编码模块与长依赖时序运动建模模块。通道级运动特征编码模块通过相邻帧间的短距离时序上下文对运动特征进行编码,从而得到更加有效的短时运动特征。长依赖时序运动建模模块利用双向LSTM网络,学习远距离帧间的时序上下文关系,为解决行为识别中的长依赖问题提供了一种解决思路。
其他文献
新能源电动汽车由于其节能环保、性能优越等特点逐渐得到了世界各国的青睐和大力发展,我国也制定了相关政策,加快新能源电动汽车的高质量发展。然而,作为新能源电动汽车上应用最广泛的驱动电机之一,永磁同步电机尤其是内置式永磁同步电机容易遭受转矩脉动的影响,从而降低整个驱动系统的性能。目前,国内外许多的研究人员和机构已经针对永磁同步电机转矩脉动的抑制做了较为深入的研究和探索,但是已有方案在工程适用性方面仍然存
智能配变终端是配电网自动化建设中的核心设备,具备数据采集、故障检测、数据存储、与云平台信息交互等功能。配变终端的性能直接影响到配电网的供电质量,是构建配电物联网的重要组成部分。在充分研究配变终端的功能需求后,采用ARM微处理器和Linux操作系统结合的系统设计架构,以“硬件平台化”和“软件定义终端”为设计理念,分模块设计为设计思路,设计了一种新型智能配变终端,并对智能配变终端的总体架构、底层硬件、
分布式电源是有效使用清洁能源的重要方式,微电网是分布式电源接入配电网的典型应用,可缓解大量分布式电源直接并网给配电网运行与保护造成的影响。然而,微电网可直接接入配电网或者独立离网运行,由于分布式电源控制类型的差异,以及容量与输出电流的限制,在两种运行模式下微电网的故障电流水平差异较大,容易造成传统的过流保护或者距离保护误动或拒动,导致保护失效。同时微电网多端电源供电结构、双向短路电流等特点对其故障
电力变压器是电力系统的核心部件,针对电力变压器的状态检修是维护电力系统安全稳定的重要环节,而状态检修工作的基础在于状态评估。变压器的状态评估实际上是依靠算法处理样本数据,来评估变压器健康状况的一个过程。然而,单一算法的特性与变压器状态评估工作并不够契合,本文针对变压器状态评估工作中存在的主客观方法比较片面、状态量之间相互干扰、数据量过多难以处理和评估过程需要满足模糊性和随机性问题,综合各类算法的优
磷酸铁锂材料的理论比容量为170m Ah/g,因其高安全性被广泛应用于电动汽车等领域,但由于磷酸铁锂电池低温下锂离子电导率较低,目前无法实现低温下对电动汽车中磷酸铁锂电池的安全充电(T≤0℃)。温度对大容量磷酸铁锂锂离子动力电池充放电容量影响显著,因此,对大容量磷酸铁锂电池液冷热管理系统的开发研究具有重要的科学意义和实际应用价值。本论文主要包括以下研究内容:(1)研究了15Ah磷酸铁锂圆柱电池的电
伪装人体检测是计算机视觉领域一个具有挑战性的任务。伪装人体检测在边防监控、入侵检测、军事目标发现等方面有着重要的应用。在此之前,已有一些与伪装人体检测相关的研究,通常是提取目标的外观特征,包括颜色或亮度特征、纹理特征、梯度特征、运动特征、深度特征等。由于在伪装场景中人体目标与背景的视觉特征高度相似,这些方法难以有效的描述它的特征并建立有效的检测模型,从而导致对不可预见场景下的错误检测。尤其是基于视
基于会话的推荐系统,定义为在用户匿名的情况下,仅仅依靠当前匿名会话中有顺序的物品点击序列,预测匿名用户的下一次点击行为,这在电子商务、短视频平台等互联网应用场景中都颇为常见。基于会话的推荐和传统推荐的最大区别在于,基于会话的推荐任务不使用用户的历史行为和画像信息,属于用户冷启动的问题,因此精确地推断用户兴趣显得尤为困难。现有的基于会话的推荐算法大多采用循环神经网络来建模会话中的时序关系,然而由于传
自转旋翼飞机是中小型低空载人航空领域的主要飞行设备之一,在军用和民用方面均具有独特的优势。传统的自转旋翼飞机采用燃油发动机进行驱动,其飞机振动噪音大、红外特征明显、环境污染严重等问题十分突出,在实际应用中亟待解决。论文设计一款满足自转旋翼飞机驱动要求的轴向磁通电机,对于自转旋翼飞机优势的发挥无疑具有一定的理论意义和工程应用价值。首先,介绍了全电动自转旋翼飞机的结构和起飞原理,并根据自转旋翼飞机的技
由于在通信、安检等领域的广阔应用前景,聚焦于太赫兹信号的产生、探测、调制及传输的太赫兹技术在近些年发展迅速。滤波器在太赫兹信号的探测、调制及传输过程中都有着极为重要的作用,因此高性能太赫兹滤波器的研究具有较高的应用价值。而作为一种具有人工设计的、呈现出天然材料所不具备的独特电磁性能的材料结构,超材料由于制备工艺简单、性能优异近些年已被应用于太赫兹器件中。本论文工作围绕如何提高滤波器的衰减深度、带宽
双馈风电网侧变流器多采用LC型滤波器,与感性电网阻抗交互会在高频段产生一谐振峰。电网中含有与谐振峰频率相近的背景电压谐波时,会造成变流器接入点电压谐波放大,影响风电系统的稳定运行。本文针对该背景电压谐波放大现象进行研究,提出电压谐波放大系数进行定量衡量。为抑制电压谐波放大,以放大系数为指标定量设计了所需的并联适配电阻。受到装置大容量的限制,风电变流器控制带宽较低,难以通过控制算法实现其对高频谐波的