多类几何信息与解剖学约束的图像三维人手逆运动学重构

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:babala_chen
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
从二维图像中获得三维信息并重构三维网格模型表示不仅是计算机视觉研究的主要内容,同时也是计算机图形学的重要应用。其中,从单幅图像重构三维人手模型在人机交互、计算机动画、虚拟现实等领域有着广泛的应用。本文提出一个基于多类几何信息与解剖学约束的图像三维人手逆运动学重构方法。首先,本文利用计算机视觉中多目标卷积神经网络的方法从图像中提取多类几何特征信息,包括人手关节点在图像中的位置、人手关节点相对深度关系和手指关节点所在面法向;其次,引入人手解剖学运动约束作为先验,进一步限制人手姿态的解空间;最后,利用人手参数化模型拟合前面获取的几何特征信息,并以人手解剖学先验作为约束建立优化模型。在此基础上,本文提出基于块坐标下降法的逆运动学拟合优化方法求解相机参数和人手三维姿态参数。最终该姿态参数将用以模板模型的蒙皮变换得到相同姿态下的三维网格模型。实验结果表明,与已有方法相比,本文利用多类几何信息与人手解剖学约束的逆运动学拟合重构方式能够更准确地重构出合理的三维姿态模型。此外,对于本文方法中间结果的实验分析结果表明,在本文的多目标特征神经网络手部特征提取中,本文首次引入的关节点所在面法向信息估计取得了不错的预测效果,并且通过消融实验分析了该几何信息对人手重构中手指关节朝向估计的帮助。
其他文献
随着深度卷积神经网络的发展,生成对抗网络被应用于图像翻译领域并取得了优异的效果。素描与彩色图像之间的翻译(Sketch-to-Image,S2I)就是从素描图像稀疏的信息中重建出其他
非易失性、高读写速度、高存储密度、低功耗和设备小型化是未来磁存储器的主要发展趋势。磁信息写入过程中,由于电流密度必须大于临界电流密度才能达到目标,这将导致能源消耗
中国卒中发病率是全世界最高的国家之一,由于国家的高度重视,我国的脑血管病防治工作已初显成效,但脑卒中依然是我国成年人致死和致残的首要原因。因此,我国脑卒中的防治工作
明胶包裹单一活性药物的传统胶囊已经被广泛的应用于日常生活中,然而,传统口服胶囊的原料明胶来源鱼龙混杂、明胶包裹单一药物、胶囊爆发式释放模式等问题很难满足人们日益增
语音分离是一项从各种复杂的声学场景中提取出目标语音的技术。目前大多数主流的语音分离算法为有监督类算法,这类算法使用非负矩阵分解(Non-Negative Matrix Factorization,
音圈电机自适应光学系统通过测量波前畸变,调整变形镜面形,来实时校正波前相差,特别适用于大型光学/红外望远镜的地面层校正。音圈电机驱动时,需要位移传感器构成局部反馈回
热挤压3D打印技术具有能依据需求个性化外观制造和定制化营养配比的优势在食品领域备受关注。大米、小麦和马铃薯是居民膳食中的重要主食,其主要营养成分淀粉的消化、吸收和
智能交通系统(intelligent transportation system,ITS)能够产生两类典型的实时交通大数据:一类是GPS数据,另一类是车牌识别流式数据(automatic number plate recognition da
稀疏线性方程组的求解是许多科学计算任务和工程技术问题的核心环节。随着实际问题复杂度的增加,对稀疏线性方程组求解方法的优化研究显得尤为重要。已有的变量部分值相加的
铁电存储利用铁电薄膜的自发极化方向存储‘0’和‘1’两个状态,具有高密度、低功耗的优点,是非易失性存储领域长期关注的存储方案。近年来,随着薄膜制备技术的进步,铁电薄膜