基于单张图片的人体三维重建技术及应用研究

来源 :兰州理工大学 | 被引量 : 0次 | 上传用户:zhangchi900207
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人工智能与计算机硬件技术的快速发展,推动了计算机视觉相关任务的热潮。通过单张图片重建的人体模型在人们的日常生活中得到了广泛的应用。本文综合考虑了基于单张图片的人体姿态和体型三维重建过程中存在的时间开销、重建精度等问题,利用深度学习和人体关键点检测的相关理论与技术,并结合人体参数化模型,实现对人体姿态和体型的三维重建。最后,实现了一套非接触式人体体型测量系统。本文主要研究内容如下:(1)针对现有基于单张图片进行人体姿态三维重建模型中存在的重建精度不高、生成效率较低等问题,提出一种结合卷积注意力CBAM(Convolutional Block Attention Module)和Transformer架构的人体姿态三维重建方法。首先,结合Res Net50网络与卷积注意力CBAM,提取二维图片的深度特征;其次,利用SMPL(Skinned Multi-people Linear model)人体模型对深度特征进行位置编码,生成具有人体关节点坐标信息的特征向量;再次,将带有人体关节点坐标信息的特征向量输入至具有逐层降维功能的Transformer架构中进行降维并提取三维坐标;最后,将Transformer生成的三维坐标参数输入至SMPL模型,生成三维的人体姿态模型,完成人体姿态三维重建。实验结果表明,所提出的方法能够有效地提升重建精度和效率,各项指标相较其他主流方法均有一定的提升。(2)在姿态重建的基础上,利用多尺度特征融合算法实现人体体型的重建。该模型首先利用Openpose提取输入图片中人体的关节点位置信息,并利用Pix2Pix图像转换算法对输入图片的前景和背景姿态信息进行预测;其次,将关节点位置特征、前景和背景特征、高分辨率表面细节特征、低分辨率全局特征等多尺度特征进行融合,并借助像素对齐隐式函数对提取的多尺度特征进行重建,生成具有完整立体形状及准确姿态的人体三维模型。实验结果表明,所提出的方法在保持较低时间开销的情况下,具有更高的重建精度。(3)为了实现用户在线获取人体三维模型及基础参数,设计了一个基于多尺度人体重建算法的非接触式人体体型参数测量系统。首先,基于Layer UI框架进行前端网页界面的设计,包括性别选择和获取照片等两个模块;然后,在后台服务器上运行嵌入的人体三维重建算法并获取人体模型;最后,通过网页端访问测量模块接口,完成人体体型参数的测量。经过测试表明,该系统能够正常获取图像、重建完整的三维人体模型,并有效获取人体模型的体型参数数据,初步实现非接触式人体参数测量的功能。
其他文献
<正>骨盆骨折通常与高能量创伤有关,同时常合并神经血管、腹部脏器、泌尿生殖系统等致命性软组织损伤[1]。儿童骨盆骨折的致伤原因主要是行人机动车交通事故[2-3];据报道,儿童骨盆骨折患者中最常见的致伤机制是机动车与行人相撞,其次为机动车相撞、高处坠落[4]。儿童骨盆骨折在儿童创伤中的发生率为2%~5%[1]。随着交通业的发展和高层住宅的增多,儿童骨盆骨折合并多发伤逐渐增多。严重骨盆骨折合并多发伤患
期刊
增大不锈钢管内壁孔隙面积和粗糙度,提升管内壁换热效率的需求与日俱增。针对传统表面加工方法难以处理小管径不锈钢长管内壁的问题,提出了利用电爆喷射沉积法在小管径不锈钢管内壁喷涂多孔涂层的关键技术。电爆喷射沉积法是基于对导体电爆炸现象的应用,衍生出的一种新的涂层制备方法,具有绿色环保、能量利用率高、对被喷涂基体影响小、涂层结合强度高、工艺参数调整方便等优势。本文在对电爆炸喷射沉积机理认识的基础上,针对小
学位
随着化工生产过程的不断发展以及高科技技术的注入,流程中的人身安全和生产安全渐渐得到了越来越多的关注。但是,由于化工流程的复杂程度提升,发生事故的风险也变得越来越大,对安全生产带来越来越大的威胁,为了保证工业过程稳定可靠地运行,生产过程的有效监控以及故障的及时排查显得尤为重要,可靠的故障诊断技术成为了一种有效的安全手段,同时也是一个被广泛关注和值得研究的课题。本文针对工业化工过程系统数据庞大且复杂、
学位
骨盆骨折合并出血性休克是目前创伤骨科医生面临的巨大挑战,其致死率非常高。早期积极采取止血措施对于挽救生命具有重要意义。常用的止血方式包括骨盆稳定装置、腹膜外骨盆填塞、动脉栓塞、复苏性主动脉内球囊阻断装置等。临床上根据骨盆骨折的严重程度和血流动力学稳定程度选择最佳的干预措施对预后具有决定性作用。该文对骨盆骨折合并出血性休克的各种止血措施进行综述,并探讨其最佳的治疗流程。
期刊
敦煌莫高窟作为世界上独具特色的人类艺术宝库之一,迄今留存了数量庞大的壁画作品。这些珍贵壁画以其独特的艺术风格和绘画方式真实生动地记录了公元4世纪至14世纪中国先民的宗教信仰、文化民俗、政治军事、自然环境等多方面的信息,具有非常重要的历史、人文、艺术和社会研究价值。长久以来,莫高窟壁画受所处地区自然环境、人类活动和气候条件等因素的影响,普遍产生了多种类型的病害,如壁画颜料层起甲、脱落、粉化、变色、褪
学位
推荐系统包含数据挖掘技术、机器学习技术以及深度学习技术,是解决信息过载问题的最有效的工具。目前,推荐系统已被广泛的应用于各大互联网公司的服务产品中,旨在根据用户的兴趣喜好帮助用户快速的获取信息。与搜索引擎不同,推荐系统以一种主动的方式向用户展示信息,更适合用户需求模糊的场景。此外,搜索引擎不仅需要用户提供明确的信息需求,还存在着马太效应,即信息的流行程度会随着搜索量的迭代而增加,而搜索量较少的信息
学位
随着中国经济社会的进步,机动车拥有量急剧增长,城市交通拥堵等问题越来越严重。为了有效解决交通拥堵问题,智能交通系统被广泛应用于动态交通管理中,而交通流预测作为相关交通管理部门实行管控的重要依据,一直是智能交通系统的重点研究内容。交通流预测是智能交通系统的重要组成部分,准确的交通流预测不仅能够帮助城市交通管理部门进行交通诱导和控制,还可以为出行人员提供实时的具体道路信息,提高道路通行能力。因此,对交
学位
随着当前移动互联网技术的发展,抖音、快手等短视频平台如春笋般涌现,越来越多的用户在短视频平台上发布视频,其中包含丰富的表情信息,对这些视频中的表情信息进行识别,构建具有较强鲁棒性的人脸表情识别模型,在人机交互、情感研究等领域起到重要的作用。表情识别旨在对给定的图像或者视频中的人脸表情进行识别,是计算机视觉领域中一项困难且重要的研究热点。本文首先通过Transformer对人脸区域进行建模,对静态人
学位
目的:观察肤痔清软膏联合口服氯雷他定片治疗慢性肛周湿疹的临床疗效。方法:选取102例慢性肛周湿疹患者,按随机数字表法分为治疗组52例与对照组50例。对照组给予单纯氯雷他定片口服治疗,治疗组在对照组基础上给予肤痔清软膏外敷治疗。2组均治疗2周。比较2组临床疗效及随访3个月、6个月复发率发生情况,比较2组治疗前后皮损症状评分、症状消失时间、血清免疫球蛋白E (IgE)的变化。结果:治疗组临床疗效为98
期刊
目前,旅游业已成为我国国民经济战略性支柱产业,尽管新冠疫情对旅游业产生较大影响,但是不可否认,旅游业在经济发展、促进就业、提高人民生活水平等方面发挥了重要作用。旅游积分服务是提升旅游服务质量、增加用户粘性、降低营销成本的一个重要手段。但是现有积分系统通常存在积分流通性差、公信力不足、维护成本高等问题。区块链是一种分布式账本数据库技术,具有不可篡改、公开透明、可溯源的技术特性,可以在产业链之间搭建分
学位