基于深度学习的数据生成和三维姿态估计

来源 :山东大学 | 被引量 : 0次 | 上传用户:tiger20091
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文借助深度学习,探索了计算机视觉中一项极其重要而又无比艰难的任务,从单张图片中恢复人体三维姿态。人体姿态是人体建模的基础,很多应用,如姿态识别,动作识别,情感分析等等,都以人体三维姿态估计为基础。同时,人体三维姿态估计又是一项极其困难的任务。在人体三维姿态估计中,需要恢复的信息不止x,y轴,还包括Z轴深度信息。本文提出了通过深度学习,采用卷积神经网络的方法对输入图像进行特征提取,从而恢复出人体三维姿态的方法。卷积神经网络可以最大限度的提取图片的有效特征,在各种计算机视觉的任务上,相比于传统学习方法,表现出了极高的性能提升。然而,在三维姿态估计任务中,人体三维姿态标签特别难标注。这导致了训练集不足,无法训练一个有效的深度神经网络。为解决这个问题,本文提出可以利用计算机图形学中的渲染方法,构造大批量带有三维人体姿态标签的训练数据,从而解决训练集不足的问题。我们发现,在构造渲染数据中,人体姿态空间的覆盖和纹理的多样性是能否成功构造合适训练数据的关键因素。同时,本文提出了一个全自动,大批量的自动渲染算法框架来渲染图片,借助该框架,我们可以从人体姿态空间中进行采样,同时从真实衣服图片中抽取纹理贴图信息。此外,我们还探索了域迁移算法,用于缩小训练数据,也是就是渲染数据,和测试数据,也就是真实数据之间的差异。我们训练了新的网络,针对合成图片和真实图片,可以输出混淆在一起的特征。我们证明,我们的渲染数据可以用于训练卷积神经网络,在人体三维姿态估计上,该网络的表现优于当前最佳方法。同时,域迁移使得合成图片和真实图片的差异进一步缩小,能在原有的基础上进一步提高。
其他文献
通过改变航空铝合金材料加工方式的实验分析,研究了加工工艺对航空铝合金材料电导率特性的影响规律。从4个方面改善加工工艺,使航空铝合金材料特性及其电性能在加工前后保持
一、河内的文庙越南河内文庙是越南旅游景点之一,与中华文化有很深的历史渊源。越南李氏王朝李公蕴自幼受汉文化熏陶,饱读书、诗、经、史,是个有远见的开国君主。他吸收前朝
深圳汉德成立于2015年,是一家致力于车载智能称重管理平台的高新科技企业,总部位于深圳,在北京、香港均设有研发基地。深圳汉德是全球首家以超低成本实现实时监控车辆载重的
当今我国的视障群体出行仍有很多不便,智能导盲杖的设计不仅有助于他们在出行时能较好地识别障碍物,而且给他们的日常生活带来了极大的便利。智能导导盲杖主要是利用超声波来
摘 要:中国传统文化中鱼意象的意蕴丰富,包含着图腾崇拜、祥瑞吉兆和生殖信仰等含义。宋代的绘画在宋代艺术中成就可观,士人集团这一新的社会阶层的形成大大促进了文人画的兴起和发展。宋代文人画多好水墨写意,追求神似而非形似,注重内心情感和文人意趣的抒发,其中的画鱼大家当属刘寀、范安仁、周东卿等人,刘寀所作的“鱼藻图”流传于世。鱼意象在宋代文人画中呈现出新的内涵,本文主要从鱼之逍遥和鱼之乐两个部分进行分析。
宗炳(375—443年),字少文,南阳涅阳(今河南镇平)人。“好琴书,善画”。南朝时代有名的高士和画家。沈约《宋书》和李延寿《南史》都把他列在《隐逸传》里。据《宋书》本传记:宋武帝刘
字表发布以后,会对社会用字的规范起到重要作用。教材类的出版物,特别是基础教育阶段的教材,不但社会影响广泛,而且关系到每个社会成员规范用字习惯的培养,是贯彻落实字表的基本渠
报纸
孟德斯鸠在<论法的精神>中对中国的德政作了论述和分析,其中多有不当甚至自相矛盾的地方.究其原因,除了对中国情况的隔膜外,主要在于他对欧洲君主制的肯定以及将东、西方君主
提到战争,人们脑海中多会出现金戈铁马、炮火硝烟、尸横遍野的悲惨景象;而音乐对于人们来说则是一种美好的艺术,是人类智慧和感情升华的产物,更是和平安宁、欢乐幸福的象征。那么
山水画理论<笔法记>是人们研究六朝至五代时期山水画理论发展史的重要文献.其作者荆浩,字浩然,河南沁水人,生于唐朝末年,约卒于五代后唐年间,主要活动于公元9世纪至10世纪上