基于RGB-D的关节点稳定检测与交互应用系统

来源 :郑州大学 | 被引量 : 0次 | 上传用户:guhiayan123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能技术的飞速发展,人工智能时代即将到来,要进入这一崭新时代,就要使得机器能够完美地理解人类的动作,因此对人体动作识别方面的研究就必不可少。人体姿态估计作为研究动作识别的基础,也一直是人们研究的重点,其目的是得到更加准确的人体关节点三维位置信息以进行人体动作识别。目前市场上最成熟的关节点检测设备为Kinect设备,它是一款基于彩色图像和深度图像来提取人体骨骼关节点信息的无穿戴体感设备,其检测方法虽然很完善,但依然和其他关节点检测方法一样面临着关节点抖动或关节点发生遮挡导致的关节点信息检测错误的问题。目前主要采用滤波或者人体模块分隔等方法来对采集得到关节点信息或图像信息进行进一步的处理,以得到更加准确的关节点信息,但依然没有完美地解决该问题。针对以上问题,本文设计了一种利用Kinect采集得到的图像信息来得到稳定的人体关节点信息的检测方法。该方法首先利用Kinect设备采集人体骨骼关节点三维位置信息及其对应的彩色图像和深度图像;接着将对齐到深度图后的彩图代入到Open Pose关节点检测算法中,得到人体二维关节点信息;然后将两种方式得到的关节点信息进行坐标系对齐处理,并将处理后的数据代入到设计的骨骼拟合优化算法中,从而得到更加精准的人体三维关节点信息;最后对该方法得到的骨骼关节点模型进行了实验对比验证。实验证明其不仅可以改善遮挡导致的关节点检测错误问题,而且得到的连续关节点模型的稳定性也优于Kinect关节点模型。本文接着将设计的关节点稳定检测方法与虚拟现实技术相结合,设计了一款冶铁遗址博物馆体感交互系统。该系统的主要设计流程为:首先利用Unity3D虚拟引擎虚拟复原了古代冶铁场景;接着利用Kinect体感交互设备,通过设计的关节点稳定检测方法,实现了游客与场景中冶铁工人模型的虚拟交互;然后设计添加了一些冶铁相关小知识的交互模块;最后对系统流程进行了进一步的设置与优化,完成了该交互系统的设计。
其他文献
目的:共词聚类分析结果的表达是共词分析应用的最后一步。现有的共词分析结果表达的方法均具有一定的局限性,所得到的结果存在主观性较强及表达不全面等问题。本研究提出基于
随着近几年的发展,深度学习方法在许多人工智能应用领域取得了极大的突破,例如计算机视觉和自然语言处理。其中在计算机视觉领域,不同于传统方法依赖的手工特征提取,深度学习由于其端到端训练的特点,和优越的特征提取性能,近几年以卷积神经网络为代表的深度学习方法几乎在所有计算机视觉子领域都取得了重大突破,极大地推进了这些研究领域的发展。在本文中,基于卷积神经网络,我们将聚焦计算机视觉领域中两个重要任务:图像识
近年来,灾害事件、恐怖袭击频发,使得搜救机器人逐渐成为机器人产业中受到较大关注的一个分支。搜救机器人凭借其自身结构特点可以在战后、灾后(地震、火灾、恐怖袭击等)未知
土地是农业的根本,农用地的数量、质量、利用情况及其空间分布等信息是构成农业信息资源的基本要素和重要基础。对农用地数据进行精确采集和动态跟踪管理,是实现现代农业生产
随着2019年《政府信息公开条例》的修订,过程性信息正式作为政府信息存在的形态之一,被纳入“可以不予公开”的范围之中。但是在目前的法律制度中,过程性信息的概念界定模糊,公开与否的认定标准不一,对信息公开的具体实践造成困扰。因此,对过程性信息的豁免公开作出合理认定有着重要意义。合理构建过程性信息豁免公开的认定体系,首先需要明确过程性信息豁免公开的理论基础。为了保障行政机关内部坦诚交流、保证行政效率与
信息技术的发展给人们带来了不少好处和便利,但是信息安全和版权保护问题同时也变得益发突出。数字印刷品作为信息交互的重要方式,其版权保护和信息安全也越来越受到重视。数
本文主要进行了两项工作:一是对中心-外围模型(Center-Periphery Model,一般简称C-P模型)进行推广并建立理论模型。本文在标准C-P模型中引入了政府部门,进而探究在农业部门,
随着互联网信息规模的急速膨胀,对大规模数据进行快速处理、学习和挖掘的需求也变得越来越多。在许多真实应用比如社交网络中,具有图结构的数据的规模也在不断变大。因此,基于图计算的大规模分布式(并行)机器学习框架受到了越来越多的关注。一方面,许多数据间的依赖关系可以自然地用图来进行建模,而且许多数据本身就具有图或网络的结构,例如社交网络数据;另一方面,许多机器学习和数据挖掘的算法也可以用图或网络来建模。在
常压容器作为化工产品生产、存储及运输的常用设备,具有广泛的应用需求。危化产品常压容器罐底经长期使用后极易出现腐蚀减薄、电化学腐蚀等结构性缺陷,极大增加了化工产业的
随着移动互联网的发展,越来越多的用户通过移动终端,使用数据流量观看视频。用户在观看移动视频的同时,产生了大量的行为数据。从用户的行为数据中分析用户的属性信息,挖掘用