机器人分拣系统中的三维场景智能感知技术研究

来源 :江苏科技大学 | 被引量 : 0次 | 上传用户:caodahai
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着时代的发展和科技的进步,机器人技术已经在不同场景下得到了广泛的应用,其中,机器人智能分拣系统的设计是研究者们一直关注的课题。在机器人智能分拣系统中,使用计算机视觉技术使机器人拥有场景感知能力是一个非常重要的部分。设计出一个稳定、高效的抓取系统,不仅需要考虑机器人内部硬件以及外部结构设计,而且需要最合适的算法来适配不同任务场景。本文针对机器人分拣系统中两种场景,设计了两种不同的算法流程。两种场景下,相同点在于机器人面对的都是散落在桌面上的物体,不同点在于两种场景中的物体的摆放状态。第一种场景中,不同的物体以任意的姿态朝向摆放在桌面上,物体之间没有堆叠;第二种场景中,各个物体相互堆叠地散落在桌面上。由于不同的场景各有特点,所以本文设计了相应的视觉算法来适配不同场景。在第一种场景中,物体没有堆叠,本文设计了一种基于三维检测网络的物体四自由度位姿生成方法。首先,设计了一种卷积神经网络在RGB图像中识别物体,并回归出物体三维包围盒、物体中心点;其次,利用包围框坐标,调整因相机视角而偏移的物体中心点位置,并同时计算物体在桌面上的朝向,作为物体姿态信息;最后,根据第二步得到的信息,控制机械臂进行平面抓取任务。在实际场景中,三维目标检测精度达到88%,抓取成功率达到94%。在第二种场景中,物体之间有堆叠情况,使用四自由度无法完全描述出物体的姿态,此时平面抓取方法不再适用,所以本文提出了一种结合了物体分割和点云处理的物体位姿计算方法,并设计了一种视觉抓取策略,优先抓取未被遮挡的物体,改善了因物体堆叠而产生的抓取不稳定情况。首先,提出了一种合成数据集制作方法,得到物体包围框、掩膜、遮挡信息并写入标注文件,克服了人工标注不准确且耗时的弊端;其次,基于Mask-RCNN图像分割网络,融合颜色信息和重新编码后的深度信息,提高了物体分割效果;最后,结合物体分割结果和场景点云,得到未遮挡的物体点云,并利用两次点云配准技术,算出物体位姿,实现物体六自由度抓取。实验结果表明,网络在真实场景数据集上的精度为92%,在实际抓取中,成功率达到91%。
其他文献
<正>旨在及时推介我国农业领域具有开拓性、引领性的基础研究重大成果和具有重大应用价值的研究成果,展示我国农业科技原始创新能力,提高农业科技引领度和显示度,宣传农业科技创新精神,营造良好创新生态。1遴选方法遵循"前沿引领、开创卓越、重大突破"的遴选原则,通过初选(结合文献计量与同行评价结果)、专家评审、综合遴选等环节,筛选出十大科学进展。22021中国农业科学重大进展2.1发现水稻产量和氮肥利用协同
期刊
目的:通过对某三甲医院(以下简称某院)碳青霉烯类抗菌药物的处方进行初评和终评,发现不合理用药的问题并提出干预措施,提高该院该类抗菌药物的合理使用水平。方法:通过回顾性处方点评的方法,抽查2018年11月的113份病历作为干预前研究资料,抽取2019年2月份的82份病例作为干预后研究资料,依据相关规定和指南对使用碳青霉烯类抗菌药物的处方进行打分点评,再将分数结果反馈于各个科室,提出干预措施和跟踪管理
为了满足某高超声速涡轮发动机巡航工况(Ma=3.2)性能要求,在某8级轴流压气机方案基础上,针对压气机在该工况对应转速(相对换算转速0.748)下流通能力不足问题进行设计优化。通过创建多级压气机1维分析设计平台,采用试验设计方法分析并确定了对压气机低转速性能影响较大的关键参数,基于模拟退火寻优算法完成对多级压气机气动布局的重构;通过采用宽范围低损失多段圆弧中弧线设计、高流通转子叶型设计、低转速可调
质子交换膜燃料电池是氢燃料电池技术中极具潜力的一个方向,它有工作温度低,发电效率高,对环境友好的特点,已经广泛的应用于交通运输领域和移动便携设备领域。质子交换膜燃料电池最佳工作温度范围较小,因此质子交换膜燃料电池的热管理系统是相关领域的研究重点之一。本文针对某商用车公司生产的质子交换膜燃料电池重型卡车,开展了关于质子交换膜燃料电池热管理系统的控制策略的研究。本文对当前国内外的质子交换膜燃料电池进行
该文介绍了一款环形耦合的圆形贴片天线。采用圆形金属贴片作为天线的辐射贴片,通过在介质板上引入两个谐振环,产生两个新的工作谐振频段。通过调节圆形贴片和耦合环之间的高度,进一步拓宽了天线的工作频段。通过3D打印技术对不规则的介质基板进行加工制作,有效解决了传统加工方法加工难度大及生产周期长的问题。测试结果表明,该天线在3.8~5.8 GHz工作频段内,回波损耗小于-10 dB;在5.1 GHz时,天线
【目的】探明百香果不同类型枝梢生长特性及果实品质差异,为百香果的科学生产管理提供参考。【方法】以台农一号百香果为研究对象,调查分析不同季节枝梢生长发育、开花结果及果实品质差异。【结果】百香果全年多次生长、开花和结果,不同季节枝梢果实纵径和横径均为前10天生长较快,之后生长缓慢,在19~22 d接近最大值,65~70 d果实开始成熟。不同枝梢不同时区的果实品质存在明显差异,其中,春梢和秋梢的单果重高
目的:构建基于5G互联网医院的远程探视系统,缓解新生儿家属因疫情防控限制而产生的探视焦虑感,解决医疗机构远程探视资源不足、探视流程混乱以及探视效率较低等问题。方法:采用5G室分技术,将5G信号覆盖新生儿重症监护病区(NICU),构建远程探视软硬件终端系统,结合新生儿电子健康卡和院内信息集成平台,实现新生儿的诊疗数据互通共享,为家属提供高清晰、低延时的实时视频探视。结果:打破线下探视局限性,有效缓解
沸腾氯化因具有生产效率高、成本低、环境污染小、自动化程度高等优点,已成为四氯化钛生产的主流方式。结合双瑞万基钛业公司研究实际,主要讨论了沸腾氯化生产四氯化钛过程中除铝、除钒以及除去四氯化钛中固体颗粒杂质的工艺及研究进展,认为采用氯化炉多级旋风分离系统、离心分离系统及真空搅拌蒸发系统除去四氯化钛中固体颗粒杂质,有机物除钒,配合精四氯化钛中氧碳杂质在线检测技术精准除铝等多项技术措施并用,可以满足高品质
目的 :评价压力性损伤移动数据应用程序在临床护理管理中的应用效果。方法 :于2020年3月至2020年8月选择某医院60例住院患者为研究对象,按入院先后顺序分为实验组和对照组各30例。实验组采用压力性损伤移动数据应用程序进行压力性损伤管理;对照组采用常规压力性损伤护理方法。比较两组压力性损伤分期识别正确率,创面评估、描述记录所需时间和会诊响应时间。结果 :实验组压力性损伤分期识别正确率明显优于对照