视频中细微动作识别方法的研究

来源 :沈阳航空航天大学 | 被引量 : 0次 | 上传用户:f117f117f117677
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,细微动作识别成为计算机视觉领域的研究热点,在人机交互、监控安防、智能机器人等领域有广泛的应用价值。细微动作主要发生在室内,动作的变化多集中在末端肢体、动作幅度小,人与物体交互复杂。通过人体姿态可以确定手、头等重要人体部位的位置,能反映出肢体的细微变化。因此,本文基于人体姿态对细微动作进行识别。主要工作如下:提出一种基于关节点置信度的姿态平滑算法,解决姿态数据的噪声问题。首先将视频中同一人的姿态划分成序列,然后以关节点置信度作为权重对姿态序列中的关节点进行平滑,抑制姿态关节点轨迹中的噪声点。提出基于图结构的关节点特征和肢体特征,增强模型对细微动作的表达能力。将物体泛化为节点与人体姿态结合,在物体节点和手节点之间建立虚连接,构建人-物交互的关节点图结构特征。肢体可以传递更明显的空间变化信息,本文从姿态数据中提取肢体方向信息构造肢体图结构特征。提出以图卷积网络为基础的双流网络进行细微动作识别。两个网络流分别对关节点特征和肢体特征建模,从不同角度表达动作。在图卷积网络中引入特征通道加权机制,突出姿态数据中的细粒度信息。最终在输出层融合两个网络分支的分类值,得到更准确的识别结果。在Kinetics数据集和MINTA数据集中的实验表明,对姿态数据平滑后姿态数据噪声减少;基于关节点图结构的人-物交互特征可以提升细微动作辨识度;特征通道加权机制能够提升模型性能;双流网络对细微动作的识别得到了较好的效果。
其他文献
芳基卤化物ArX作为一类重要的结构基元,在生物、材料、医药等领域扮演着非常重要的角色。此外,由于sp2C-X键在过渡金属作用下的反应活性,基于芳基卤化物为底物的传统偶联反应
随着云计算、大数据产业的发展,数据中心的数量和规模呈几何级增长。数据中心作为信息基础设施,在提供计算、存储、网络服务的同时也存在能耗过大、资源利用率过低的问题。计
目的:本研究旨在探讨乳腺癌DCE-MRI及DWI成像特征与表皮生长因子受体(EGFR)及P120连环蛋白(P120ctn)表达的关系,希望从影像学角度为评价乳腺癌生物学行为、选择治疗方式及判
氧化石墨烯(Graphene oxide,GO)作为一种新型纳米材料在许多领域有广泛的应用。同时伴随GO而来的其安全性以及环境暴露可能产生的毒副作用与潜在毒作用机制也逐渐引起人们的
十九世纪九十年代末至二十世纪二十年代初,是第二国际建立与活跃的时期。也正是在此历史时期内,资本主义从自由竞争阶段转而迈入垄断阶段,并不断发展成熟。其具体表现为:经济上,资本主义生产力飞速发展,垄断结构形成;政治上,资本主义民主政治进一步完善,资产阶级统治逐渐加强;社会结构上,欧洲各国阶级构成发生剧烈变化,分化与融合并存;外交上,近代民族国家与国际格局的雏形逐渐建立等。这对国际无产阶级运动和马克思主
随着复杂网络研究的兴起,复杂网络的安全问题变得越来越重要。特别是随着互联网的广泛应用,如何提供一个安全可靠的网络是国家和社会共同关心的问题。研究发现,无标度网络的
随着我国养殖业迅速发展,我国成为了世界上的养殖大国。为了促进畜禽的生长、保证畜禽的健康,许多畜禽养殖场将抗生素恩诺沙星作为饲料添加剂添加到畜禽饲料中,造成恩诺沙星
电解水是最方便、绿色和可持续的制氢方法之一。然而,析氧反应(OER)具有缓慢的动力学和高过电位,而被认为是限制电解水发展的主要因素。最近,作为OER电催化剂的层状双氢氧化物(L
由于特殊的物理性质,超临界流体已被广泛应用于有效成分提取等众多领域,但大多数物质在超临界流体中的溶解度较小,导致工作效率较低。于是,超临界流体强化技术开始兴起,其中
本文用化学镀法,制备了Fe@Ag、Fe-Co@Ag复合纳米粉体,对Fe@Ag、Fe-Co@Ag复合纳米粉体进行了表征。并用制备的Fe@Ag、Fe-Co@Ag复合纳米粉体作为导电、导磁相配制了导电、导磁