【摘 要】
:
目前成熟的机器人抓取技术大多仅能应用于布局固定的结构化场景,难以准确抓取非结构化场景中特征繁多、随意摆放的多类物体。为了使抓取机器人能对位置不固定的多类物体进行准确且稳定的抓取操作,本文设计了基于深度学习的机械臂抓取系统。首先,使用Kinect v2相机采集抓取场景的彩色与深度图像,通过训练完成的Mask R-CNN网络对彩色图像中的目标物体进行实例分割得到掩膜。接着,结合深度图像将掩膜区域的二维
论文部分内容阅读
目前成熟的机器人抓取技术大多仅能应用于布局固定的结构化场景,难以准确抓取非结构化场景中特征繁多、随意摆放的多类物体。为了使抓取机器人能对位置不固定的多类物体进行准确且稳定的抓取操作,本文设计了基于深度学习的机械臂抓取系统。首先,使用Kinect v2相机采集抓取场景的彩色与深度图像,通过训练完成的Mask R-CNN网络对彩色图像中的目标物体进行实例分割得到掩膜。接着,结合深度图像将掩膜区域的二维像素转换为目标物体的三维场景点云。然后,利用点云配准算法得到点云模板与场景点云的变换关系,根据该关系计算出相机坐标系下的抓取位姿。最后,使用手眼标定参数将抓取位姿转换为UR5机械臂末端抓取位姿,根据该抓取位姿逆解出机械臂各关节角度,引导机械臂完成抓取任务。本文主要完成了以下研究工作:1.为了获取二维图像中的三维度量信息,本文设计了基于Kinect v2相机的视觉系统。使用Kinect v2相机采集抓取场景的图像,并对Kinect v2相机与抓取系统进行标定,得到相机参数与手眼标定参数。2.为了获取机械臂末端抓取位姿,本文通过Mask R-CNN实例分割网络分割出图像中单个目标物体的掩膜,再结合深度图像将掩膜区域的二维像素转换为目标物体的三维场景点云,并建立目标物体的点云模板库。其次,利用SACIA和ICP点云配准算法,以获取点云模板与场景点云的刚体变换关系,并使用该关系结合手眼标定参数进一步计算出机械臂末端抓取位姿。3.为了使机械臂末端执行器能运动到抓取位姿完成对目标物体的抓取任务,本文设计了机械臂抓取控制系统。使用四点法标定UR5机械臂的工具中心点,依据标准D-H建模法建立UR5机械臂的运动学模型,并检验运动学模型的准确性,设计机械臂抓取控制流程。4.为了检验本抓取系统的实际抓取效果,本文搭建了机械臂抓取实验平台并设计实际抓取实验。实验结果显示:本抓取系统对单物体与多物体的多次抓取平均成功率分别达到92%和86.25%。因此说明本抓取系统可以对位置不固定的多类物体进行准确、稳定的抓取。
其他文献
行车辅助系统在智能交通中起着至关重要的作用,因此,对道路交通上的目标动态信息进行有效感知与处理成为研究人员研究的热门课题,视觉系统的研究则更是尤为重要。随着深度学习的极速发展,目标分割算法能够对目标进行有效的分割处理。本文结合深度学习神经网络,研究了针对双目视觉图像的目标分类以及距离探测问题。本文具体内容如下:(1)传统的图像目标检测领域中R-CNN算法分类效果差和不具备探测能力等局限性,本文针对
三端口变换器以优于传统的二端口变换器的特性被广泛使用,但是多个端口之间能量流动及相互作用,同时会对系统的电能质量产生影响。本文以三端口变换器为研究对象,利用三端口变换器搭建了小型光-储发电系统,研究了自抗扰控制(ADRC)在三端口变换器系统中的电能质量调节策略,分别对系统中的功率平衡问题和扰动下的频率问题进行调节,主要研究内容分为以下几个部分:首先,介绍了课题的研究背景及意义,阐述了与课题研究相关
随着现代社会经济的快速发展,新能源在电力领域中的地位逐渐上升。但由于新能源具有很强的随机性与波动性,当大量的新能源直接接入大电网时,电网的电能质量可能会受到影响,电网的安全运行也不能得到保障。而这些危害能够通过微电网得到有效的解决,微电网因其诸多的优点得到了高度的关注。随着微电网技术的发展,微电网能量管理系统(EMS)作为整个微电网的能量调度核心对各单元进行合理的优化调度,提升微电网的整体效益。而
花木兰是中国传统文化的代表性人物之一,在跨文化传播过程中,花木兰形象不断被剪裁加工。但花木兰形象在异域文化体系下的传播模式尚未提出系统阐释。基于哈罗德·拉斯韦尔的“5W”传播模式,从传播主体、传播内容、传播途径、受众定位和传播效果五个方面,对比讨论了花木兰形象在文学及电影作品中的形象变体,认为传统故事和民族形象在异国文化中的变体和再诠释反映了不同民族的文化内涵,构建“借船出海、借梯登高”的传播模式
2020年,迪士尼备受瞩目的真人版商业电影《花木兰》上映后票房遇冷、口碑平平,这与1998年动画版《花木兰》取得的惊人利润和观众认可形成鲜明对比。从改编学角度来看,两版电影同样是对于中国传统民歌《木兰辞》的诠释和再创作,而改编效果则到改编主体的影响。本文将通过时代、商业和受众三个视角对中国元素的运用和配角设计进行比较,分析二者口碑差异巨大的原因。只有顺应时代潮流和市场导向的改编电影,才能兼具商业性
逆变器作为将直流电转化交流电的转换装置为人们日常生产和生活带来巨大便利。多电平逆变器可实现低耐压器件高压输出而广泛使用于中高压领域,但其特殊的结构也增加了故障发生的可能性。由于逆变器故障的发生对逆变器本身及整个光伏发电系统都将造成影响,因此研究有效的故障诊断方法对整个系统的稳定性和安全性都具有深远意义。本文对多电平逆变器故障诊断方法和量子神经网络的国内外研究现状进行了综述。紧接着对NPC三电平逆变
在《“十四五”循环经济发展规划》中提出的双碳目标——碳达峰、碳中和,将深刻地影响我国能源体系的变化,含风能、太阳能等分布式新能源发电单元的微电网凭借着灵活、高效、环保等特点受到了广泛的关注。此外,随着电动汽车在市场上的占比越来越高,大规模的电动汽车负荷会给微网带来一定的运行压力。当电动汽车负荷接入微网时,存在两个问题。问题一,传统的微网需求侧响应忽略了车主参与的积极性,使得大规模电动汽车充电负荷接
切削颤振制约了数控机床的加工精度和效率,降低了机床的可靠性和使用寿命,甚至可能导致严重生产安全事故。因此,及时、准确地监测切削颤振的发生是保证加工质量和生产安全的关键,但颤振诱因复杂、采用单一因素难以准确判别,给颤振监测带来了本质性困难。针对此问题,提出了基于多源数据融合的数控铣床切削颤振智能监测方法,实现了加工过程中切削颤振的实时监测。本文主要研究内容如下:提出了数控铣床切削颤振智能监测的两级数
近些年来,随着我国不断发展,高楼林立,各种电子设备和大型电力设备随处可见,不可避免增加了设备接地和雷电事故的风险,故需要对各种电子设备和建筑物进行接地处理。由于接地材料、土壤环境等各方面因素影响,接地电阻值会变化,从而造成接地不良引起各种安全隐患。接地电阻值是判断接地是否良好的重要指标,传统接地电阻值需要人工定期去现场测量记录管理,耗时耗力。论文设计研发一套接地电阻实时检测与云监测系统,采用电位降
随着2020年我国北斗导航卫星系统(Bei Dou Navigation Satellite System,BDS)全球组网成功,标志着北斗三号系统(BDS-3)迈入全球定位、导航和授时服务的新时代,如今正是开发与应用北斗三号系统、使其为全球用户提供优质服务的最佳时机。绝对定位中的精密单点定位(Precise Point Positioning,PPP)仅使用一台接收机即可实现全球范围内的厘米级高