基于单目视频的三维人体运动重建

来源 :山东大学 | 被引量 : 0次 | 上传用户:zhengwwwchao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人们希望计算机具有像人类一样理解现实世界的能力,而人体运动作为现实世界中最常见的视觉内容之一,是机器视觉研究的经典研究对象。运动重建作为高层应用的基础算法,通过从图像、视频中恢复出关节点坐标、旋转角度等信息来表示人体运动,在机器人感知与模拟、行为分析、虚拟现实等领域具有广阔的应用前景。在人工智能的推动下,二维运动重建已经被工业界所使用,但是世界是三维的,二维的人体表达无法精确的恢复人体姿态,为了更好地理解人体运动,更具有挑战性的三维人体运动重建成为了近年来的研究热点。现有的三维人体运动重建的方法,主要分为两大类:基于不同维度数据映射的方法,人体模型参数预测的方法。然而,这些方法都存在以下问题:难以利用人体关节间的层级连接关系;缺乏时序上人体模型一致性,不同预测帧之间仅仅传递了坐标信息;三维人体关节坐标难以标注,在有限数据集上训练所产生的过拟合,使得算法在真实场景下的表现并不理想。针对这些问题,本文提出一种基于单目视频的三维人体运动重建方法,通过设计出的双通路神经网络结构,同时预测出基于固定的人体骨架及所对应的关节旋转、全局坐标及脚步接触信号;将正向运动学的过程模拟在神经网络中,能够将单一骨架贯穿在整个时序预测中,大大减小了关节坐标的搜索范围,并能保证预测结果符合运动学常识;在关节角速度上使用的对抗学习,也保证了生成结果的真实性。本文在多个公开数据集上完成了对算法效果的评估,实验结果表明,本文提出的方法能够恢复出最准确的人体骨架,重建结果具有极高准确性。通过与其他方法的比较,发现本方法大大改善了运动重建的准确性、真实性、鲁棒性。
其他文献
调整与下跌成为今年A股市场的主旋律。从去年10月16日的6124点至今年6月20日的2695点,上证指数跌幅高达56%,也就在这短短的八个月时间里,即使考虑到新上市股票的因素,两市总市值此
政治、经济、文化和科技的一体化加快了国际合作的步伐,国家形象与国家的声望和利益息息相关,在国际社会上的作用越来越突出。国家各位代表的讲话是塑造国家形象的最重要手段
目的:观察清热通便汤防治湿热下注型混合痔术后排便困难的临床疗效。方法:本研究选取符合纳入标准的患者70例,随机分成常规治疗组和清热通便汤治疗组,两组各治疗7天。观察患
在创伤骨科临床治疗中,甘露醇广泛应用于患者软组织创伤和骨折导致出现的局部组织疼痛、肿胀治疗中,具有高效高渗脱水作用,不但能够提高患者尿量,减少水肿,同时还能够有效的
近年来,我国经济快速发展,交通条件已经成为城市发展的重要标志。交通便利将拉近城市与城市之间的距离,加快城市发展的步伐,越是发达的国家交通条件越是便利。加快公路的建设对促进地方经济发展,提高各地人民生活水平,改善人民消费水平有着十分重要的意义。加快各地方的公路建设越来越重要。在一级公路建设过程中,实地踏勘,根据线路的实际情况,查明线路周围的地质灾害,比如崩塌、滑坡、泥石流的发育特征和周围的影响因素,
<正>都教授的座驾酷毙了。"小强当即用手机搜索起来,"噢,是AMG车型",小强盯着手机屏捣鼓着。小强比较了参数等信息,找到了4S店的信息,本来就有购车计划的小强在4S店的页面预
植物病虫害和杂草的丛生、消长与气象条件有密切关系。为了保障农业高产稳产农业上采用农药防除病、虫及杂草,这是保护植物的有效方法。在选用农药种类、使用方法需要考虑气
三季度宏观经济分析:经济增长迅速 运行风险增大;中国城镇登记失业率下降 失业率拐点已现;央行行长助理易纲:我国将处于升息周期;罗奇:施压中国汇率等于给美国人加税;居民财产性收入
当下资本市场低迷的深层原因,需要从资本市场的外部宏观环境、政策因素和资本市场内部机制的角度进行深层次解读。
随着经济的飞速发展,交通行业也得到了迅速的发展。高速公路发展状况对交通运输有极其重要的意义,高速公路的网络信息化对高速公路的建设有十分重要的作用,网络信息化建设是高速