多评价因素大视场下并联机器人堆叠串类水果抓取位姿检测研究

来源 :江苏大学 | 被引量 : 0次 | 上传用户:water15
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于机器人技术实现水果自动分拣对农业生产和农产品加工的自动化、智能化发展具有重要意义。少自由度并联机器人用于水果自动分拣,具有精度高、速度快、刚度大等优点,但同时也对检测和控制的准确性和快速性提出了更高要求。水果的抓取位姿检测是机器人实现准确、快速、无损抓取控制的前提条件。机器视觉具有非接触、适用性广、性价比高等优点,相比于相机安装在机器人末端的Eye-in-Hand系统,相机固定设置的Eye-to-Hand系统对机器人末端运动速度的限制较小,并具有视场大、利于优选待抓取堆叠串类水果的优点。由于Eye-to-Hand系统对机器人下一次抓取位姿的检测,可在机器人上一次抓放串类水果控制的时间内完成,因此抓取位姿检测的准确性尤为重要,本文拟着重研究少自由度并联机器人固定设置机器视觉系统对堆叠串类水果抓取位姿检测的准确性问题。目前,相关研究,还存在一些难点,主要包括:少自由度并联机器人由于存在运动约束难以完全满足标定运动要求从而导致手眼标定模型难以正确解算问题、大视场下复杂背景小对象的准确识别和分类问题、边界模糊的多评价因素下堆叠串类水果抓取优先级的评估问题、以及具有运动约束少自由度并联机器人对无形状和位置约束堆叠串类水果果梗的抓取位姿计算问题等。为此,本文探索了能够正确解算少自由度并联机器人手眼标定模型和综合评估多层相对因素集下抓取优先级的新方法,构建了多尺度特征图Faster R-CNN级联模型和少自由度并联机器人堆叠串类水果三维抓取模型,研究了具有运动约束少自由度并联机器人对无形状和位置约束堆叠串类水果果梗的抓取位姿计算方法。论文完成的主要工作如下:(1)提出一种具有误差补偿和垂直分量修正的少自由度并联机器人手眼标定方法。针对少自由度并联机器人由于存在运动约束难以完全满足标定运动要求从而导致手眼标定模型难以正确解算的问题,根据标定板和末端夹持机构的垂直约束修正手眼标定位姿参数中的垂直分量;同时,构建一种具有误差补偿的立体视觉改进Eye-to-Hand模型,以降低相机标定误差和机器人运动误差对手眼标定精度的影响,并构建Eye-to-Hand模型的非平凡解约束,以规划并联机器人末端夹持机构的手眼标定运动。标定实验结果显示,相比于随机运动,采用所提出规划运动的在线手眼标定平均耗时降低了50.51%;相比于无误差补偿Eye-to-Hand模型和矩阵直积法,采用所提出改进模型和求解法的手眼标定位姿转换矩阵2范数误差降低了151.293。(2)提出一种大视场下多尺度特征图Faster R-CNN级联模型。针对现有深度神经网络对大视场下复杂背景小对象的识别和分类准确率不高问题,构建特征图分辨率变化较小的卷积神经网络(CNN)以增加卷积特征图中小对象的特征量,并提取CNN中三层卷积层的多尺度特征图用于Faster R-CNN识别,设计由粗到精和参数分享策略实现Faster R-CNN级联,以减少背景的干扰。对Eye-to-Hand系统获取的白罗莎葡萄串图像进行果梗区域提取实验,实验结果显示,相比于LeNet-5、AlexNet、VGG16单尺度特征图Faster R-CNNs,采用所提出多尺度特征图Faster R-CNN级联模型的果梗区域提取平均准确率提高了25.87%,平均丢失率降低了30.56%。(3)提出一种多层相对因素集的堆叠串类水果抓取优先级模糊综合评估方法。为提高无损抓取的成功率并易于控制,本文将果串特征、果梗特征以及堆叠导致的抓取位置限制、机器人末端位姿变化难易程度等均作为堆叠串类水果抓取优先级的评价因素,但由于具有多评价因素,且各评价因素间边界不清,因此存在优先级难以综合定量分析的问题。为此,构建一种基于子树形结构的无交叉树形分层模型以分析堆叠串类水果抓取优先级的多种评价因素;同时,通过增加轮廓全局方向变化、轮廓点梯度方向变化等约束条件定位果串区域分割点,采用基于相似度指标构建的加权聚类有效性评价函数、三角形不等式准则、数据点的多通道多维特征向量等改进现有k-means算法,构建具有正负影响相对因素集;并通过采用数学期望构建平均随机一致性指标和满意值,解决现有判断矩阵一致性校验采用经验数据导致的准确性较低问题。对Eye-to-Hand系统获取的堆叠白罗莎葡萄串图像进行抓取优先级评估实验,实验结果显示,相比于现有单层模糊综合评价法,采用所提出多层相对因素集模糊综合评价法的抓取优先级评估平均准确率提高了27.77%。(4)提出一种建立三维抓取模型的少自由度并联机器人堆叠串类水果抓取位姿计算方法。针对具有运动约束少自由度并联机器人对无形状和位置约束堆叠串类水果果梗的抓取位姿难以准确计算问题,考虑少自由度并联机器人末端夹持机构的运动约束和堆叠串类水果果梗特征,构建一种单点多参数抓取位姿表达法,建立四种分别针对有分支长果梗、有分支短果梗、无分支长果梗、无分支短果梗串类水果的三维抓取模型;构建离散Gaussian-Hermit矩作为特征点描述子、通过分块采样特征点对和预校验临时候选数学模型改进现有SURF和RANSAC算法,以准确定位无形状和位置约束果梗上的抓取点,并基于三维抓取模型解算少自由度并联机器人末端夹持机构的空间位置、绕Z轴旋转角度以及手指开口宽度的抓取位姿信息。以白罗莎葡萄串为对象,采用构建的4-R(2-SS)并联机器人Eye-to-Hand系统进行抓取实验,实验结果显示,相比于基于平面轮廓的抓取位姿计算方法,采用所提出抓取位姿计算方法,有分支和无分支堆叠串类水果抓取成功率分别提高了14%和12%,平均抓取成功率提高了13%。本文的研究可实现高准确性的少自由度并联机器人固定设置机器视觉系统对堆叠串类水果的抓取位姿检测,为非接触式无损抓取位姿检测理论应用于机器人自动分拣的检测及进一步实现高性能抓取控制奠定了基础。
其他文献
上海电网早在20世纪80年代就投运了第一代GIS设备。GIS几乎集中了变电站的各种电气设备,因此保证GIS系统正常运行就显得十分必要。而如今,在上海地区,最早投入使用的GIS设备
基于量子力学的数值求解二维含时薛定谔方程的方法,研究了双色激光场驱动氦原子辐射太赫兹波的特点.研究结果表明,两束激光的相位差对太赫兹波的产额具有显著的调制作用,在高
应用经典系综方法模拟了反旋双色圆偏振激光场下Ar原子非次序双电离过程.双电离概率随激光强度变化曲线呈现出"knee"结构,表明了明显的电子关联特征.通过调节倍频与基频激光
随着信息时代战争形态和环境的变化,我军现代化建设已经步入机械化和信息化建设双重发展轨道,尤其军队兵种不断扩大,指挥范围更广,信息量更多,对网络化指控系统一体化协同作战的需
高分子与纳米粒子复合是改善高分子材料性能的有效途径.近20年来关于高分子/纳米粒子复合物的研究引起了学术界广泛的兴趣.然而由于此类体系中的影响因素复杂,虽然学者们在相
通过对一座神圣金字塔的考古发掘,人们找到了更多与阿兹特克帝国那些血淋淋的祭祀仪式相关的线索。但到目前为止,尚未发现那位最令人害怕的皇帝的踪迹。在墨西哥城著名的索卡
板栗(Castanea mollissima BI.)为壳斗科栗属植物,是我国利用得很早的一个树种,也是我国重要的木本粮食树种之一。前人对板栗的研究多集中于板栗的生理生化、良种繁育、栽培
明代杂剧在中国文学史上始终不甚引人注目,明代后期单折短剧作为明杂剧革新的产物亦少有人问津。然而通过考察,可以发现明代后期单折短剧中不乏内涵深厚、水平颇高的作品,这
凡是以木材为燃料,窑炉结构完整,坯体高温烧成达到瓷化的烧成方式,我们都可称之为柴烧。柴烧又分为传统柴烧与现代柴烧,现代柴烧文化是对传统柴烧文化的继承和创新,两者的本质区别在于对个人价值的不同体现。本文主要探讨现代柴烧作品的审美特征,文中将传统柴烧作为研究的起点,认为它既蕴含历史性的审美沉淀,同时也展现了在场性的审美实践,而后进入到审美对象。文章从现代柴烧的特点展开对现代柴烧作品审美特征的研究。文章
以长白落叶松人工林为研究对象,应用平均标准木法及枝解析木法调查树冠生物量,并采用标准枝法与枝条模型估算法对估测的树冠生物量进行了比较研究。分析了枝长与枝基径,枝条