开放环境中番茄的双目立体视觉识别与定位

被引量 : 0次 | 上传用户:zxc99zxc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
果蔬识别和定位的准确性与实时性将直接影响果蔬采摘机器人的采摘成功率和采摘效率。开放环境中果蔬的识别和定位受非结构环境因素的影响很大,因此一直以来是采摘机器人研究领域的研究重点之一本研究以番茄为研究对象,利用双目立体视觉技术,详细探讨了开放环境中番茄图像分割算法,被枝叶遮挡番茄识别算法,成簇番茄识别算法及番茄3D定位方法,部分解决了当前番茄采摘机器人视觉系统研究中存在的问题,所开发的番茄识别和定位算法将为番茄采摘机器人视觉系统的改善奠定一定理论和方法基础。主要研究内容及研究结论如下:(1)比较了基于色差、归一化色差、颜色分量比这三类颜色特征的番茄图像分割算法的分割性能。基于归一化色差、颜色分量比的番茄图像分割算法可实现不同光照强度下的番茄图像分割;光照较弱时.归一化色差法的分割效果较好;顺光条件下,光照较强时,双颜色分量比法的分割效果较好。(2)提出了融合番茄光斑识别及分段阈值的番茄图像分割算法。该算法基于R分量与光照度的相关性,融合了基于归一化色差及颜色分量比这两类番茄图像分割算法的优点,进一步结合番茄光斑区域识别方法实现了不同光照强度下的番茄图像分割。对184幅图像共计750个含光斑的番茄区域的试验表明:基于该方法的图像分割正确率为93.6%,明显优于基于归一化色差法的36.3%;平均执行时间为71ms;该算法对对顺光条件下的番茄图像具有较好的整体分割性能。(3)对比研究了基于圆回归及圆Hough变换的被遮挡番茄识别方法。首先两类方法均进行边缘曲率分析,去除曲率异常边缘,然后对曲率正常边缘分别通过圆回归及圆Hough变换实现被遮挡番茄的识别。对220幅存在遮挡的番茄图像的试验结果表明:轻微遮挡时,两类方法的识别正确率分别为90.8%,89.1%;中度遮挡时,两类方法的识别正确率分别为50.4%,74.8%;严重遮挡时,两类方法的识别性能均较差;可见存在遮挡时,圆Hough变换法的整体识别性能优于圆回归法;两类方法的平均执行时间均约为100ms。(4)对比研究了基于数学形态学、圆回归、圆Hough变换及双目立体视觉的四类成簇番茄识别方法。数学形态学法通过条件腐蚀和循环膨胀实现成簇番茄的识别;圆回归与圆Hough变换法与被遮挡番茄识别所用方法相似;双目立体视觉法根据成簇区域内前后番茄区域深度差,基于迭代Otsu法将成簇番茄分为两类:重叠番茄和粘连番茄,然后使用圆回归法实现粘连番茄的识别,对经深度图像边缘分割后的彩色图像边缘应用圆回归法实现重叠番茄识别。经138对存在轻微遮挡的成簇番茄立体图像的试验结果显示:存在轻微遮挡时,四类方法的识别正确率分别为60.9%,69.0%,71.1%,82.5%;存在较严重遮挡时,四类方法的识别性能均不理想;四类方法的平均执行时间分别为3、85、138、500ms。试验结果表明:双目立体视觉法对粘连及重叠番茄的识别性能均较好,其余三类方法对粘连番茄的识别性能较好,而对重叠番茄的识别性能均较差;双目立体视觉法的整体识别性能要优于其余三类方法,特别是对重叠番茄。(5)提出了番茄3D测量误差校正方法。研究了基于形心特征匹配,区域匹配及组合匹配的三类立体匹配方法,分析了基于三类立体匹配的3D定位误差,分析了造成深度测量误差的要因,提出了相应的校正方法,讨论了遮挡对3D定位精度的影响,测试分析了三类立体匹配方法的实时性。组合匹配将粗匹配阶段通过形心匹配获得的番茄粗略视差作为精匹配阶段区域匹配的视差范围中心,从而获得了一个中心随图像采集距离变化而变化的动态视差范围,在确保获得与区域匹配相近匹配精度的同时,减少了立体匹配计算量,图像采集距离在300~1000mm范围内时,所需匹配时间为区域匹配的三分之一。1349对立体图像的试验表明:1)基于三类立体匹配得到的x坐标测量误差相对较小,分别为:[0,12.8],[1.3,13.8],[1.3,13.8]mm。y坐标及深度测量误差相对较大,且与图像采集距离间分别呈现近似线性递减和递增的关系。2)经二元分段线性回归y坐标预测模型校正后,基于三类立体匹配的y坐标测量误差范围分别为:[-7,-0.8],[-6.1,1.4],[-6.1,1.8]mm。3)番茄大小是影响深度测量误差的要因。4)经基于深度测量值及番茄大小的二元线性回归深度预测模型校正后,基于三类立体匹配的深度测量误差范围分别为:[-10.4,28.7],[-6,12.8],[-5.6,5.3]mm。5)x、y坐标测量结果比深度测量值更易受遮挡影响。6)三类匹配方法的执行时间分别为:[0.4,4],[24,288.8],[9.6,98.8]ms。(6)编制了基于C语言的番茄识别和定位软件。完成了番茄识别和定位算法应用流程,动态链接库及测试软件的设计,应用于番茄采摘机器人的视觉系统后,进行了实验室及温室的采摘试验。23次实验室采摘试验,识别成功18次,采摘成功11次;10次温室采摘试验,识别成功9次,采摘成功8次;采摘效率约为30s/个。上述研究成果将为进一步提高番茄采摘机器人视觉系统对开放环境的适应能力奠定一定的方法和技术基础。
其他文献
木材鉴定对于木材检验检疫、木材流通贸易、木材加工利用、木质文物考古、处理纠纷与刑事案件等工作都具有重要的意义,越来越备受相关单位和有关人员的重视。然而权威的鉴定必
癌症是威胁人类健康的重大疾病,因此对于肿瘤与机体之间相互作用的研究及新型抗癌药物的开发具有极大的学术和社会价值。肿瘤的发生发展与肿瘤微环境密切相关,细胞因子是肿瘤
随着高速铁路在中国的迅速发展,高速火车的制造量也越来越大,时速200km以上的高速火车车厢外皮几乎全是由铝合金板及大型铝合金型材焊接而成,因此需要大量的铝合金焊丝。目前
电力系统供电电能质量对我国经济的发展和人们生活水平的提高有着重大的影响。良好的电能质量有利于电气设备的正常运行,保障了科学实验和工业生产的正常进行,有效的降低了能
在当前我国高等教育学科体系日益完善的局面下,不少综合性大学都设立了音乐相关学科,师范院校也在原有的基础上扩大了音乐教育规模,因而接受专业音乐教育的群体也在逐渐增加
在我国区域对外贸易高速增长的同时,环境问题成为制约对外贸易发展的一项重要因素。本文对环境约束、对外贸易和经济发展的关系进行了实证研究。以寻求区域环境保护和对外贸
指类句(generics)以隐性全称判断的形式呈现被用于指明一类事物的某一特征,并且相对于一定的语用需要去作出的特设判断。指类句概述分为两种:(1)类—类,如“狗是一种动物”;(2)类—属,如
河南省的自由贸易试验区在今年的四月一日正式揭牌。该自贸试验区是由郑汴洛三个片区组成的,河南自贸区的领域达119. 77平方公里。郑州、开封、洛阳这三个片区发挥的作用和地
弗朗西斯培根是20世纪西方最伟大,最重要的现代画家之一。他的艺术作品刚劲雄浑,画面主要表现人性的扭曲,伤痛和人性异化的精神倾向及强烈的精神孤独感。作品直接而畅快的表现人
2009年是我国利润表变革的一年,6月企业会计准则解释第三号引入综合收益的概念并将之在利润表中进行列示,12月在发布的相关工作通知中对在附注中的格式进行了明确。综合收益