基于深度学习双目视觉技术的果实识别与定位研究

来源 :山东科技大学 | 被引量 : 0次 | 上传用户:yantianwa
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
重农固本,是安民之基,“三农”问题一直是国家重点关注的问题之一。在持续大力发展工业经济的同时,不断地优化农业产业结构,调整产业政策,促进农业产业进步与发展。随着现代科学技术的发展进步,逐渐向农业产业现代化,智能化,自动化产业新格局迈进。果实的识别与定位是智能采摘的关键。针对青椒果实检测过程中果实与植株背景颜色相近以及温室内环境背景复杂的问题,本文以温室大棚环境下的青椒果实作为研究目标,对采摘机器人的目标检测及定位技术进行研究。本文主要研究如下:首先,研究温室大棚环境下的青椒果实,提出使用Mask-RCNN目标检测算法对青椒果实目标进行的分割识别。研究Mask-RCNN网络结构,并在此基础上优化深度残差网络及特征金字塔网络结构。其次,使用温室环境下采集到的青椒图像,首先使用Labelme对原始图像数据集进行图像标注,生成掩膜(mask)图像,用以计算训练过程中的反向损失以及进行参数的优化。并通过将带有注释的掩膜(mask)图像与掩膜(mask)的预测结果进行比较,从而对用于实例分割的训练模型的性能进行评估。使用ResNet-50作为青椒目标检测模型的骨干网络,设置IOU为0.55,并采用迁移学习方式对标注数据集进行训练,对损失值进行统计,生成训练损失曲线,损失值都能够收敛并稳定在一个范围内。使用150幅测试集图像进行模型性能验证,通过结果统计分析可得:获得平均精准率(AP)为0.944,均值平均精度(mAP)为0.927,检测平均用时为1.2s/张,能够达到采摘机器人对于果实目标实时检测的要求。然后,研究双目摄像机标定及三维立体匹配算法。根据摄像机成像模型、双目摄像机成像原理及深度计算原理,确定使用张正友标定法获取双目摄像机的内外参数。使用基于质心的特征点匹配方法,选择合适的匹配约束条件及相似性度量函数进行三维立体匹配。最后,使用ZED Stereo Camera双目立体摄像机、NVIDIA JETSON NANO嵌入式开发板、显示器、三脚架等组成双目立体视觉系统,并对系统进行标定及立体校正,然后获取果实质心坐标并进行立体匹配,最后进行空间测距实验,实验表明,双目摄像机实际测量距离与实际距离误差范围在0~20mm以内,该误差范围内基本上能够满足青椒果实采摘工作的精度要求。
其他文献
2020年教育部重新修订了高中物理新课标,强调高中物理课程应通过物理情境提高学生的课堂参与度,并使学生探究、实验、思考以及自主学习等各方面能力得到培养;同时要求教师把多样化的教学方式和现代信息技术巧妙结合,利用情境使学生学会提问,在此过程中使学生充分理解物理学的本质,更加完整地认识自然界,让思维习惯得到科学的锻炼,使得学生处理实际问题的能力得到加强。由此可见,以学生为主体进行问题导向教学是当前教育
本论文将学习进阶应用于高中生指数函数的认知水平发展研究,并以《普通高中数学课程标准(2017年版2020年修订)》(简称“课程标准”)与三版本教科书中涉及指数函数的内容为主体,参考数学学科核心素养作为划分成就水平的依据,构建高中生指数函数学习进阶模型,以揭示学生学习指数函数过程中概念的认知发展规律,指导指数函数教学与评价。本论文采用自上而下验证性的研究范式,共分为三个研究阶段:(1)准备期,采用文
在整流器领域,由于VIENNA整流器拥有较高的功率因数、较低的电流总谐波畸变率、且有开关管少、损耗小等优点,在很多能量单相流动的中大场合应用普遍。但是,VIENNA整流器拓扑上的滤波电感导致了三相输入电流在过零点时会产生畸变现象。为了提高VIENNA整流器的性能,使得输入电流正弦化且与输入电压同相位,本文提出了基于电感在线辨识的VIENNA整流器输入电流畸变优化方案。论文首先从课题的背景以及研究意
随着科学技术的迅猛发展,信息技术革命、人工智能时代的到来对每个国家来说都即是机遇,也是挑战。在此背景下,当机器逐步取代简单、重复性的劳动力,以“创造性”为核心的创新素养将成为人才培养的关键要素。培养能够应对快速变化社会所需的必备品格和关键能力是当代教育的使命所在。STEAM教育以其跨学科融合特征及对高素质人才培养的独特价值受到各国教育界的广泛关注,开创了科学技术教育的新型模式和创新人才教育的新范式
目的本研究在吸收国内外绩效评价研究成果的基础上,寻找和分析影响放射技师绩效的相关因素,旨在探索山东省三甲综合医院放射技师绩效评价指标体系的构建,为医院放射技师绩效
本论文主要研究了日粮中添加不同配比的亚麻油与棕榈油对绒山羊瘤胃发酵及脂肪酸组成的影响,研究结果为通过营养调控油脂改善绒山羊羊肉脂肪酸组成提供理论支持。试验分体外试验(试验一与试验二)和体内饲养试验(试验三)两个部分。试验一主要对亚麻油与棕榈油的比例进行初筛,采用单因子完全随机试验设计,分为五个处理,分别为亚麻油:棕榈油为0:10(Ⅰ组)、4:6(Ⅱ组)、5:5(Ⅲ组)、6:4(Ⅳ组)、10:0(V
随着社会进一步的发展,人们对权利的认识普遍提高,人们也越来越习惯于从权利的角度去观察和思考法律和社会问题,权利的地位因此也变的越来越高。同时人们也希望拥有越来越多
近年来,IT服务业发展迅猛,市场竞争日趋尖锐,同时IT服务项目涉及多方面领域,专业性强,风险高,项目管理理论在IT服务项目中的应用越来越广泛,而项目人力资源管理成为了项目管理中不可或缺的一部分。IT服务项目大多数采用人事外包的形式,外包人员由于其特殊性,派驻在客户现场办公,十分容易缺乏归属感,具有流动性大的特点。如何根据实际情况,加强在项目中对外包人员的有效管理,成为了承包商与服务商亟待解决的问题
由于GPS的移动互联网终端设备越来越普遍,人们在平常生活中已习惯使用基于位置服务的应用系统。GPS定位系统主要用于户外定位。随着时代的发展,人们对室内定位应用有着越来越大的需求,如大型展厅等定位导航等,最近几年,室内定位技术和相关系统的研究逐渐成为热点。很多人开始对Wi Fi、Zigbee等无线基站进行研究,期望以此来实现室内定位,不过,能够应用的实际系统的并不多。本文以i Beacon蓝牙节点传
屏风作为中国传统文化发展进程中的重要承载,因为不同时期的传统文化都有其独特的特征,致使在不同时期屏风都具有其不同的特点。在明代,屏风的发展达到一个巅峰,本文从明代屏风从发展背景层面到文化内涵层面这一纵向和从造型层面到纹样层面的横向这两条线,立体的全面研究明代屏风。本文首先对屏风整体进行简要的概述,并对室内屏风的功能进行分类,分为引导人流、分隔空间及美化室内环境。从战国到元代多个时代,屏风种类由少到