面向机器人抓取的弱纹理物体六自由度位姿估计方法研究

来源 :上海交通大学 | 被引量 : 7次 | 上传用户:henan8810
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着产业技术的发展,“机器换人”等产业升级对机器人的智能化水平有了更高的要求,其中机器人的视觉感知技术作为智能机器人核心模块之一发挥着至关重要的作用。其中,物体六自由度位姿估计是机器人视觉感知技术中的一大关键问题,目标是给机器人提供抓取目标物体的信息。这里获取的六自由度位姿是物体坐标系与视觉传感器(相机)坐标系的变换,由三自由度平移变换与三自由度旋转变换组成。能够应对复杂背景与环境的物体六自由度位姿估计技术是智能机器人抓取物体的基础,无论是对于工业机器人还是服务机器人都具有重要的意义。另外,2000年以来一些局部特征描述子的提出,使得具有颜色纹理信息的物体位姿估计难度大大下降,但在实际场景中往往很多物体缺少或没有纹理信息,即为弱纹理物体。对于这些弱纹理物体,传统上基于纹理局部特征描述子匹配的方法则无法适用,因此复杂环境下弱纹理物体六自由度位姿估计也成为了近几年的研究热点。本文主要面向机器人抓取任务进行弱纹理物体六自由度(6-DoF)位姿估计方法的研究,主要包含了以下几个方面:1)为了满足物体6-DoF位姿估计方法对目标物体的特征训练要求,本文实现了一种基于模型渲染的物体数据集自动生成系统。该系统能够直接导入目标物体三维模型,并基于球面带点粒子稳态分布的电磁学物理模型实现了虚拟环境均匀多视角点生成,根据预先配置的参数建立包含RGB-D图像,RGB图像以及边界图像在内的多种类图像数据集,用于位姿估计方法的目标物体特征训练。2)对于弱纹理物体中的朗伯表面物体,消费级RGB-D传感器能够获取其较完整的深度数据,本文采用RGB-D图像实现了两种6-DoF位姿估计方法,分别是基于模板匹配的整体图像块方法和结合整体与局部图像块方法,并采用公开数据集进行精度测试。其中,本文的第一种方法主要提出了尺度标准化模板,哈希投票和粒子群优化等关键技术;而第二种方法则主要结合了整体图像块遮挡数据训练和卷积自编码器特征回归等关键技术。实验结果证明我们提出的方法相比其他现有方法具有较高的精度,能够同时适用于背景杂乱,前景遮挡和多实例目标物体场景。其中,结合整体与局部图像块方法需要预先获取目标物体的带纹理三维重建模型,而基于模板匹配的整体图像块方法只需要目标物体的无纹理CAD模型。3)对于弱纹理物体中的非朗伯表面物体,消费级RGB-D传感器无法获取其较完整的深度数据,本文采用RGB图像实现了一种基于边界的6-DoF位姿估计方法,结合了高光去除,边界图像物体检测以及边界张量图生成等关键技术,并采用公开数据集进行精度测试。实验结果证明我们提出的方法在不使用深度数据进行位姿校正的情况下相比其他现有方法具有较高的精度,能够同时适用于背景杂乱,前景遮挡和多实例目标物体场景。其中,该方法在6-DoF位姿估计的特征训练过程中只需要目标物体的无纹理CAD模型,与目前其他需要三维重建模型的现有方法相比更加具有实用性。4)本课题分别搭建了基于RGB-D传感器的机器人抓取系统和基于RGB传感器的机器人抓取系统,并分别对基于RGB-D图像的6-DoF位姿估计方法和基于RGB图像的6-DoF位姿估计方法进行机器人抓取实验,测试抓取成功率,实验结果验证了我们提出的方法在机器人抓取方面具有一定的有效性和实用性。从公开数据集测试和机器人抓取测试结果来看,本文提出的方法不仅在弱纹理物体6-DoF位姿估计精度方面优于其他现有方法,且在机器人抓取方面具有一定的实用价值。
其他文献
本研究以鸡原代肝细胞为试验材料,探讨鸡L-BABP基因对脂类代谢相关基因及生化指标(总胆固醇、甘油三酯、低密度脂蛋白和高密脂蛋白)的影响。利用RNAi和过表达技术下调和上调
随着城乡与区域一体化的发展趋势愈加明显,这一理念已经融入到景观生态模式建设中。当前的城乡与区域规划已经突破了以工促农、以村辅城的目标,而是在新形势、新理念下,将城
新课程标准倡导自主的学习方式,给学生更大的自由空间,开发了学生的潜能,张扬了学生的个性。在听语文课时,经常有这句话萦绕耳际:“想怎样读就怎样读!”起初听到这句话,感觉
语文教学中,"想怎样读就怎样读吧"是老师们在课堂上常说的一句话。下面的教学片断也是平时教学中最为常见的:师:同学们,接下来请大家自由地朗读课文。生:(全班学生双手持书不
【摘要】文章介绍了自主学习的基本内涵,根据高职英语教学基本要求和学生的主客观需求,分析了培养英语自主学习能力的必要性,提出培养高职学生英语自主学习能力的有效途径。  【关键词】高职学生;培养;自主学习;学习策略  【中图分类号】 H319 【文献标识】A  【文章编号】1671-5969(2007)08-0104-02     一、 自主学习的基本内涵    自主学习是就学习的内在品质而言的。我国
首先叙述了空间电压矢量的基本原理,同时给出一种采用矩阵求解两相邻向量作用时间的方法,然后介绍了如何用数字信号处理器TMS320F240实现对称SvPWM波形,并且在此基础上详细地
【摘要】艰苦奋斗讲的就是不畏艰难困苦而坚持不懈地奋争。其侧重从精神层面来理解,既是中华民族的传统美德,又是我们党的一贯作风;既是由我国的基本国情决定的,又是由我国社会主义现代化建设的任务决定的,还是由建设社会主义精神文明的需要决定的。新的时代更要大力弘扬艰苦奋斗的精神,尤其是在青少年中,否则,就不能取得社会主义现代化建设的新胜利。  【关键词】艰苦奋斗;艰苦奋斗教育;艰苦奋斗精神  【中图分类号】
用手术的方式来矫治屈光不正是一个热门和激烈的问题,人们对屈光手术的长期有效性和安全性都有着不同程度的疑问.近10a来,随着人工晶状体材料的不断改进和手术技术的不断创新
腾冲地热区以热海热田为中心,其面积达100km~2,包括了数十个泉群。热区水热蚀变作用强烈,岩石发生强烈硅化、高岭土化和泥化作用,出现了以高岭石为主的一系列中低温蚀变矿物
会议
数字绘画艺术一方面对传统的造型手法和意识进行了继承,另一方面又在一定程度上对之进行了拓展,在工具的使用、造型的方式、造型意识上形成了自己鲜明的特色。