基于深度学习的多视图物体三维重建研究

来源 :电子科技大学 | 被引量 : 3次 | 上传用户:cuidayue
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
通过图像来重建三维数字几何结构是计算机视觉、计算机动画、工业制造等多个领域的核心问题。在广泛的应用领域中,重建物体的完整和精确的3D几何形状的能力至关重要。近年来,随着深度学习的发展,基于深度学习的物体三维重建成为计算机视觉领域的研究热点。本文以体素作为三维模型的表示方式,研究基于深度学习的多视图物体三维重建的方法。本文的主要工作内容如下:1.针对相机获取的RGB图像仅包含三维模型的表面信息,提出了通过模拟生物大分子的3D结构在电子显微镜中拍摄2D投影图像集的过程构建数据集的方法,从而获得包含三维模型内部信息的数据集。2.设计了3D-ResNet网络,用来实现基于多视图的物体三维重建,该神经网络不需要输入任何图像标注信息、姿态信息、物体类别标签等附加信息就可以进行训练和测试。再通过改变数据集的划分方式和构建新的数据集,验证3D-ResNet网络能学习从二维投影图像集到三维结构的映射。3.提出了将LovaszSoftmax损失函数用于模型训练的方案,可以实现三维重建效果的提升,评估指标IoU值比仅使用交叉熵损失函数训练模型更高。本文所提出的方法已通过实验定量和定性评估。结果表明,这些方法能有效提升基于深度学习的多视图物体三维重建的性能。
其他文献
视觉系统是人类获取外界信息的主要途径。据统计,大约有80%的外界信息是通过眼睛被人接收的,然而,人类的视觉在各种领域受到了很大的限制。随着计算机技术的飞速发展,让计算机来处理人类视觉信息,推动了计算机视觉这一学科的产生与发展。目标跟踪作为计算机视觉的一个重要分支,在视频监控、智能交通、人机交互和虚拟现实等领域有着广泛的应用。近些年,提出了很多种目标跟踪算法,但是在实际跟踪过程中,当目标遇到形变、光
降雨作为气象水文循环中重要的一部分,近年因受全球气候变化影响而发生了一些改变。降雨的时空分布制约着一个地区的社会经济发展,并且对该地区的防洪抗旱以及水资源的有效运
文本检测是计算机视觉中的一个重要分支。随着近年来互联网的快速发展,作为信息的主要载体之一的文字呈现出多样性、海量性、动态增长性等特点,网络上每日新增数百亿文字信息。如何从这些海量的文字信息中提取出自己感兴趣的部分已成为巨大挑战,这涉及到文本检测技术。传统的文本检测算法需要手工设计特征,并采取多个复杂步骤才能完成检测任务。受限于文本检测任务自身的复杂性,目前的文本检测算法检测性能仍然不够鲁棒。因此文
作为人类文明的重要组成部分之一的宗教,从古至今对人类社会的发展具有不可忽视的巨大作用。随着科技的进步,任何宗教自身的发展已经不再局限于时间和空间的束缚,因此,不同宗
乡村旅游区建设是乡村振兴的重要途径,而产业集聚理论在乡村旅游发展规划中的应用能更好的发挥产业集群、旅游资源集聚和旅游运营高效便捷的优势。因此,选择苏南发达地区,开
目前我国农产品生产经营和销售的方式比较单一,市场竞争优势也不突出,而且由于农产品还存在供求信息矛盾以及销售不顺畅等问题,使得农产品不能顺利进入市场中流通。农产品产
雷蒙·潘尼卡认为宗教相遇是时代特征,反对技术统治文明的全球扩张,坚决拒斥普世神学,抵制普遍主义在宗教、神学领域的泛滥,倡导宗教间的宽恕、复和,支持宗教间的对话,将宗教
随着计算机视觉的蓬勃发展,视觉任务已经深入到我们生活的方方面面。人体目标检测任务作为目标检测的重要分支,愈发受到人们的关注,在智能视频监控、人机交互和无人驾驶等方面都有极高的应用价值。本文以基于深度学习的人体目标检测方法为研究课题,主要就以下三方面进行详细的分析与实验:1.基于多尺度特征融合的人体目标检测方法。多尺度特征融合结合了不同尺度的特征信息,一方面改善了在单一尺度的特征图上进行检测而导致的
在经济科技迅猛发展的今天,从行业产品质量的竞争到产品个性的竞争,我们已经开启了品牌时代。品牌代表了市场和消费者对企业的认可,品牌价值的提高能够使企业形成良性循环,在竞争中脱颖而出。我国一直倡导品牌的主导作用,以促进供给侧结构改革。因此,企业科学的评估品牌价值,并开展有针对性的品牌建设非常必要。近年来,时尚、高性价比的快时尚服饰风靡全球。自2002年进入中国市场,快时尚服饰行业获得了快速发展,它给中
随着我国经济的飞速发展和城镇化的深入推进,在家庭承包制的基础上如何实现农户承包地规范有序流转成为各级政府关注的重点,而农村土地股份合作社因在运行中能较好的保障农民