视频中动作预测方法的研究

来源 :辽宁大学 | 被引量 : 0次 | 上传用户:xiaosanhuah
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
动作识别是计算机视觉领域的热点之一,在人机交互、影视娱乐、智能视频监控、智能医疗看护等领域有着广泛的应用。动作预测是一类特殊的动作识别问题。不同于针对完整动作的传统动作识别,动作预测旨在识别尚未完成的动作的类别,以便对该动作可能造成的影响进行分析,从而实现事故预警、犯罪预防等目标。本文从特征表示、预测机制、学习模型三个方面入手对动作预测问题展开研究,并基于上述研究成果提出一种动作预测方法。首先,本文提出一种特征表示方法。该方法在提取视频的卷积神经网络特征后提取视频的运动边界直方图特征,并通过一定的方式将它们结合,以得到一种能够同时描述人体动作的轮廓特性与运动特性的特征表示。该特征表示克服了卷积神经网络特征缺乏对于动作时序结构描述能力缺点,保留了其将关键信息离散到整个视频中的优点,因而对于非完整动作具有较强的描述能力。其次,本文提出一种动作预测机制。该机制先从本文提出的特征表示中获取语义概念,然后通过语义推理对非完整视频中缺失的语义信息进行补全,再使用补全的语义序列对动作预测模型进行学习。为实现上述机制,本文提出一种无监督语义挖掘方法。该方法在通过无监督的方式获取动作的语义概念信息后,使用广义混合转移分布模型挖掘语义关系并进行语义推理。最后,本文提出一种使用推测语义序列进行学习的结构化判别式模型。该模型将动作时序状态作为隐含变量,使用一种基于最大间隔的学习框架学习具有隐模板的全局特征、观测语义序列、由语义推理得到的推测语义序列与动作类别之间的关系,从而实现对视频中的动作进行预测。在UT-Interaction数据集和UCF-Sports数据集上的实验结果表明,本文所提出的特征表示方法、动作预测机制、结构化判别式模型等可以有效地提升动作预测的准确率。
其他文献
目标检测系统是车辆协作驾驶辅助系统和无人驾驶车辆等领域的关键组成部分。行车驾驶场景下的目标检测应用能够帮助检测车辆前方存在的各类物体目标,从而保障驾驶员或乘车人员在各类交通环境下的安全。从传统的手工提取图像特征到时今基于深度学习的目标检测任务中,信息丰富、多姿态或存在遮挡的潜在目标导致目标检测这一领域一直都存在挑战性。而如今行车驾驶场景中并不能完全脱离人的操控进行独立的环境感知和路径规划,针对协作
单兵IFF系统包括单兵间、单兵/战车间及单兵/武装直升机(近程攻击机)间的三种战场单兵IFF系统。CIDDS是提供给未装备“陆地勇士”系统的徒步单兵用的,包括武器分系统和头盔分系
期刊
目的:采用改良的超声雾化术,将中药经验方“消瘿明目方”煎汤剂,冷却后进行眼部超声雾化给药,观察该方法对瘿病眼病的临床症状的干预效果。方法:将51例瘿病眼病的患者随机分为
本文从大学生创业的社会环境与氛围、创业的教育体制与模式、创业的社会层次与领域、创业资本的来源等角度比较分析了中美两国大学生创业活动异同,并结合中国教育实际,初步探讨
针对聚合物驱产出污水特性及处理困难的特点,以含部分水解聚丙烯酰胺(HPAM)的模拟废水为研究对象,提出了超声光催化处理HPAM废水的新思路,研究了催化剂TiO2用量、HPAM初始浓度、H2
利用BP神经网络可以无限逼近非线性函数的特点,选择焊点直径,焊点高度,铜箔厚度和PCB厚度为变量,采用正交试验法设计实验,利用有限元仿真分析法获得叠层焊点在随机振动条件下
魔芋葡甘低聚糖是魔芋葡甘露聚糖的降解产物,是一种功能性低聚糖,其促益生菌的作用使其具有巨大的发展前景。本文综述了益生菌和益生元及促益生菌作用的魔芋葡甘低聚糖及其制备
采用在湿部添加特种染料的方法制备了一种新型的防伪纸。研究结果表明,在湿部添加试验的一系列的特种染料中,复配组合SBB和SB26在质量比例为5/5,总用量为0.008%(对绝干浆)时可达到较
多边开发银行的独立性,即其实际运作是否会受到主导国利益的影响是世人评判开发银行的重要内容,也是学界研究的焦点问题。文章以亚洲开发银行为研究对象,通过构建动态面板模
<正> 该博物档案馆由两幢建筑物组成:一幢是十九世纪的小酒店,另一幢则是比原酒店大的新建部分。迈尔斯把新建部分和老建筑、博物档案馆的内部和外部空间自然地结合起来。砖