面向机器人拣选的弱纹理物体位姿估计方法研究

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:whsvlsy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
6D位姿估计技术是工业机器人柔性操作中的关键技术,在机器人抓取、装配等视觉系统搭建中有着重要作用。复杂工业场景下弱纹理物体的位姿估计任务具有极大的挑战性,稳定而实时的物体位姿求解是保证机器人操作的关键因素。本文针对工业中常见的堆叠场景以及物体弱纹理问题展开研究,自建了一组高精度工业场景位姿估计数据集,并形成数据采集系统。提出了一种基于碎片模型的编码-解码位姿特征提取网络,实现高精度弱纹理物体识别与碎片模型定位。接着提出一种几何多模型拟合的位姿求解方法,实现多实例物体位姿估计优化,提升精度与实时性。具体研究内容如下:(1)针对现有数据集不符合工业场景需求的问题,探究出一种规范化6D位姿估计数据采集方法,包括合成以及真实数据。合成数据作为训练集,通过Blender真实感渲染生成照片级数据,并能够在较短时间合成大量高精位姿估计数据集。同时还探索出一种基于模型重建的真实数据采集方法,通过二维码定位并重建场景进而生成规范化位姿数据标签作为测试集,并完成数据集采集系统的搭建。(2)针对复杂工业场景中,由于物体弱纹理、对称性以及堆叠产生的自遮挡对位姿特征提取带来的挑战,提出一种物体表面碎片化策略,确定碎片中心并创建物体表面碎片模型,以碎片模型替代物体实例,提高堆叠情况下弱纹理物体位姿特征提取精度,并且能够有效地处理物体对称性。基于此碎片模型,提出一种新的编码-解码位姿特征提取网络,能够精确识别每像素物体碎片存在概率以及碎片三维位置,提取图像中多尺度特征。提出一种新的网络训练策略提升对于位姿信息提取的鲁棒性。最终实验测试得出本文的方法在公共数据集LM-O和T-Less以及自建数据集中具有较高的位姿估计性能,可以有效地解决堆叠场景弱纹理物体特征提取问题。(3)针对工业机器人智能抓取对于精度以及实时性的高要求,以及传统位姿求解方法在多实例中的局限性,提出一种基于几何多模型拟合的位姿优化方法,通过实例提议及空间聚类优化步骤拟合多个实例,在进一步提升位姿求解精度的同时提升算法实时性。最后,利用EPNP算法实现高效位姿求解。最终实验表明,本文的方法能够在有效保证精度的同时还具备较好的实时性,满足复杂工业场景需求。本文在弱纹理物体6D位姿估计的数据采集、复杂工业场景中对于位姿估计方法的精度与实时性三个方面进行探索,有针对性地提出了高精度位姿特征提取网络以及位姿优化算法解决方案,提高了复杂场景位姿估计准确率,且满足实时性需求,在智能机器人拣选方面具有一定的社会贡献。但未来还需要进一步研究泛化能力更强、场景更加丰富的数据采集方案以及更加轻量化的模型。
其他文献
传统房地一体测量的作业方式人力成本较高,并且生产效率低,不适用于大范围的作业生产。为了改变传统房地一体测绘方式的劣势,本文以实际项目为依托,探索将无人机倾斜摄影测量技术应用到房地一体测绘中。首先利用大疆精灵4RTK无人机搭载多镜头相机对测区影像数据进行采集,对采集得到的影像数据进行处理得到测区实景三维模型。以倾斜模型数据为源数据进行内业矢量数据采集,并且通过外业补测、调绘等最终完成测区地籍图的制作
以实验为基础的中学物理课堂需要一定的物质条件作为支撑,自制教具是重要的物理课程资源。为填补部分实验器材的空缺,激发学生学习物理的兴趣,提高物理课堂教学的效果,促进教师开发与应用自制教具的综合能力,现对中学物理光学自制教具的开发与应用展开了以下研究:(1)梳理自制教具的研究背景,阐述研究意义,确定本文的研究内容为中学物理光学自制教具的开发与应用,采取的研究方法为文献综述法、问卷调查法、访谈法和案例分
<正>2022年11月1日,中国石油工程建设有限公司西南分公司(以下简称CPECC西南分公司)与中国石油西南油气田公司天然气研究院(以下简称西南油气田公司天研院)联合研发的胺液在线深度复活设备在中国石油西南油气田公司川西北气矿苍溪天然气净化一厂(以下简称苍溪天然气净化一厂)成功投运,标志着CPECC西南分公司又增添了一项科技产业化产品,同时进一步助力川西北气矿“脱硫增效”。脱硫溶液作为天然气净化工
期刊
中国为保障粮食安全实行了严格的耕地保护制度,其中耕地占补平衡制度是耕地保护制度中的一项重要制度,而占补平衡指标交易是耕地占补平衡制度下的一项制度改革和创新。目前,我国有12个省份已经开始实行指标省域内交易。同时,基于脱贫攻坚与乡村振兴的目的,我国允许少数地区的占补平衡指标进行跨省域国家调剂,但大规模指标跨省域市场交易由于受到政策限制还未展开。而通过对大量文献的综合分析,发现中国部分省市随着其行政区
<正>目的:提出0~7岁儿童发育及营养指数其参范围考值,探讨评价儿童生长发育水平及营养状况的新方法、新途径。方法:依据黑龙江、湖北、江西、浙江、广东等五省15426名0~7岁儿童身长、体重、皮下脂肪有关测查结果。提出儿童生长发育营养指数(CGNI),并与国内外有关指数进行分析比较。儿童身长、体重、头围、胸围、顶臀长、上臂围、上肢长等均按全国标准测量,皮下脂肪
随着新课改深入开展,初中数学课堂教学暴露出许多问题,比如,教师没有正确引导学生的学习技能,用“题海战术”来提升学生的计算能力,但学生的学习兴趣不大.精练是目前初中数学教师普遍采用的一种教学方法.在教学过程中,教师要根据学生的性格特征和认识规律,重视培养学生的数学思维能力,把“精讲”与“精练”结合起来,摆脱“高投入、低产出”的状况.
绿色、环保、高效的航运发展理念是实现航运可持续发展的关键,作为核心的绿色船舶已成为国内外船舶技术发展的必然趋势。船舶环境污染防治和降耗减排的国际公约及相关法规政策相继出台,一方面指导着绿色船舶技术发展的方向,另外一方面作为硬性标准制约着各国。为了厘清法规政策的脉络,有效推动绿色船舶的发展,在分析国内外绿色船舶法规政策发展历程的基础上,指出了国际上在政策引导、技术方向、国际合作等方面促进绿色船舶发展
2008年金融危机之后我国非金融部门杠杆率快速攀升,至此我国进入了漫长的非金融部门去杠杆的进程中,其中国企、央企去杠杆是我国去杠杆政策中最重要也最急迫的一步。2019年,突然爆发的COVID-19疫情对我国的消费、投资和出口均带来了沉重的负担。我国的大型国企、央企不可避免地要加大基础设施建设的力度,成为稳定国家经济和就业的骨干力量,但也因此推高了国企、央企进一步扩大负债的可能性。并表型资产证券化产
<正>多年的初中物理教学,学生赞美之词越来越多。一节失败的物理课,让我的头脑清醒了许多,下面简介我对这节课的教学研究过程。友情提示同行们:教学不忘教研。
期刊
经过相关统计,到2020年12月底为止,中国大于60岁(包括60岁)的人口规模达有2.5亿,在我国总人数中占比达到百分之十八,如何养老成了困扰我们的难题。基于2020年于广东省进行家庭状况摸底调研的结果,表明省内家庭包含并超过65岁老年人的家庭在全部家庭中占比超过百分之二十四。为应对人口老龄化的问题,同时为保证老年人的生活质量,维护社会稳定,我国各级政府近年来在积极鼓励“医养结合”养老保险的发展。