基于DeepLabV3+的水培生菜异常叶片分割方法及分选装置研究

来源 :西北农林科技大学 | 被引量 : 0次 | 上传用户:windlam
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
植物工厂是农业发展的高级阶段,可以在有限的土地资源上产出更多的粮食蔬菜,能够有效解决粮食安全、季节性蔬菜短缺和地域限制等问题。水培生菜因其产量高、生产周期短和市场需求大等特点,在植物工厂中种植面积越来越大。由于水培生菜质地脆嫩,极易受损,受损后受微生物影响会快速腐烂,严重影响生菜的商品价值和食用安全。针对于此,当今市场推行对水培生菜进行包装出售,针对包装环节也推出了系列包装机械。但包装前的分选检测仍然依靠人工开展,人工分选方法劳动成本较高,费时费力,效率低下,且存在长时间工作后分选质量参差不齐等问题。为解决水培生菜包装前机械化程度低,分选任务重的问题,本文以水培生菜为研究对象,采用机器视觉对异常叶片进行检测并设计分选机构对包装前的水培生菜进行检测并完成分选任务。以下为本文主要研究内容与结论:(1)构建水培生菜图像数据集。根据水培生菜机械化采收模式,分析水培生菜外观特性,确定采用3个高清摄像头自下向上的拍摄方式来获取水培生菜图像。图像采集时间的周期为全天候,图像采集时不进行补光,以最大程度还原植物工厂内的作业环境。由于人工采集的图像数量有限,用于深度学习训练模型的数据集过少时,模型易产生过拟合现象,因此,对采集后的图像进行顺时针90°、180°和270°的旋转并采用上下镜像和左右镜像共6种方法对原始图像数据进行扩增。数据扩增后采用人工标注的方式对水培生菜数据集的整棵生菜、黄叶、干叶和腐烂叶进行标注,并赋予对应的标签。将标注数据过程中对应产生的JSON文件进行编码,生成相应的PNG图像是原始图像的真值图,并按照4:1的比例进行训练集和测试集的划分。(2)基于DeepLabV3+的水培生菜异常叶片分割方法。由于水培生菜异常叶片形状不规则,异常区域不连续,边缘不明显,根据前人的研究发现,针对这种目标,使用语义分割有望取得更好的检测效果,因此,采用DeepLabV3+语义分割网络开展本文研究。在制作训练用数据集时发现,水培生菜数据集存在严重的数据不平衡问题,水培生菜图像中背景和正常生菜像素占据图像的绝大部分,而黄叶、干叶和腐烂叶像素仅仅占据图像的很小一部分,若不对权重进行处理,模型很可能出现在预测像素占比多的类别上较精准,而在像素占比小的类别上精度低的问题。针对该状况,本文引入均一权重和中频权重两种权重设置规则,并采用Xception-65、Xception-71、Res Net-50和Res Net-101四种不同的特征提取网络,分别在两种权重设置规则下进行网络训练,并对比8种模型的性能指标,以便选出更适用水培生菜数据集的模型。试验验证表明,均一权重下基于Res Net-101的DeepLabV3+语义分割模型的平均联合交并比(m Io U)达到了0.8326,像素精度(PA)高达99.24%,且对于腐烂叶分割的联合交并比(Io U)高达0.6138,在所有模型中表现最好,因此在后续的分选系统中使用该模型进行分割识别。(3)水培生菜分选装置整体方案与关键部件设计。根据水培生菜实际采收场景和水培生菜的外观特征,分别提出夹取式分选方案和托举式分选方案。在分析对比两种方案后发现,夹取式分选方式传动机构复杂,且适用性低,而托举式分选方式传动简单,有较强适用性,且对生菜损伤更小,因此采用更适合采收场景和实际情况的托举式分选方案。确定总体方案后,对末端执行器进行设计,对比分析圆环式和支架式末端执行器两种方案,最后选择更为稳定的支架式末端执行器。最后,结合水培生菜分选装置的功能和性能要求对整体的控制系统进行设计,采用串口通信将计算机和Arduino UNO单片机进行数据通信,并确定步进电机、电磁阀、继电器、气缸等硬件的型号,设计控制系统流程图和电路原理图,在此基础上采用C语言编写控制程序。(4)水培生菜分选装置试制与验证试验。根据水培生菜自动分选装置的总体方案以及关键部件与控制系统设计,对样机进行试制并进行调试。在样机上进行二次正交旋转组合试验,对末端执行器中纵/横支撑杆的倾角和步进电机转速进行优化试验。实验结果表明,当支撑杆角度一定时,成功率随步进电机转速增大而减小,当步进电机转速一定时,支撑杆角度从140~160°变化时,成功率先增大后减小,在144°处成功率最大。最终综合考虑分选效率和成功率,选择步进电机转速20转/min,纵/横支撑杆角度均设置为144°。最后,利用最优参数组合,在水培生菜自动分选装置样机上进行验证试验,最终结果表明,样机分选成功率为93%,分选工作效率为4棵/min,较之人工分选有一定提升。
其他文献
近年来人物图像的应用场景愈发丰富,但在获取过程中,拍摄者审美水平及拍摄环境的差异导致人物图像美感程度参差不齐,因此开展美学质量评价研究,从海量人物图像中挑选出有价值的高美感图像,具有极大的现实意义。人物图像美感评价具有较强的主观性和复杂性,目前还未有统一且完善的评价标准,因此本文以人类视觉特征和审美习惯为依据,提出一种评价人物图像美学价值的可计算方法,用以进一步提高美感评价的准确性,实现各角度的细
随着奶山羊规模化养殖的推进,对羊场的精准监控及高效管理已成为亟待解决的问题。通过对羊场图像的语义分割,观察羊场环境和奶山羊的姿势与位置,可以实时监控奶山羊的行为状态,及时发现奶山羊的健康问题。本文以西北农林科技大学畜牧教学试验基地的奶山羊场图像为研究对象,构建羊场图像语义分割数据集,改进DeepLabV3+的解码网络,并优化ASPP结构,结合通道注意力机制,利用提取的图像特征,实现了羊场图像的语义
三维扫描技术可以扫描获取空间物体的外部结构特征,对于结构形状较为复杂的物体,三维扫描技术可以节省大量人力物力。当前绝大多数的三维扫描设备是分别获得部分点云数据,然后通过点云配准得到物体的完整数据。这样的应用过程没有解决动态扫描问题,不仅使得其应用场景受到极大限制,而且后期配准的时间消耗与精度损失影响了其易用性。为了解决传统双目视觉三维扫描技术需进行多次扫描,然后再进行配准的问题,提出基于光学跟踪的
目标跟踪技术是计算机视觉领域研究的基础任务,其在视频监控、牲畜养殖管理及动物研究与保护等方面均有广泛的应用。随着深度学习技术的发展,目标跟踪算法的性能也得到了广泛提升,但在实际应用中仍面临许多挑战性问题。本文以孪生网络跟踪框架为基础,以西北农林科技大学畜牧教学试验基地中的奶山羊以及VOT2016、VOT2017、OTB2015和La SOT公开数据集为研究对象,在存在相似目标干扰、目标尺度变化、目
小麦条锈病是小麦叶部的主要病害,由于受条锈病侵染的小麦叶片上会附着条锈孢子,使叶片无法正常进行光合作用,从而使叶片枯死,严重降低小麦的产量和品质。而防止小麦条锈病大规模入侵,保证产量最有效经济的手段,就是在小麦条锈病的易感地区培育具有良好抗性的小麦品种。在小麦条锈病抗病育种过程中,对小麦条锈病侵染型级别进行鉴定可以初步判断小麦对条锈病的抗性,这是抗性鉴定的重要步骤。目前小麦抗条锈病育种工作者对小麦
随着图像处理技术的快速发展,骨架提取算法为医学图像处理、科学数据可视化、虚拟现实和游戏等应用提供了技术支持。但现有的骨架提取算法存在难以并行以及并行度不高的问题,如何利用丰富的多核资源加速骨架提取算法,迅速成为了并行计算和高性能计算领域面临的一个紧迫而具有挑战性的关键问题。骨架提取算法中存在复杂的数据依赖关系,导致传统的并行策略在提升性能方面受限。针对这一问题,本文提出基于线程级推测的骨架提取算法
车道线识别及跟踪是自动驾驶视觉感知中极为重要的经典课题,通过识别当前车辆所处环境的车道线,可以为车辆的路径规划提供导航路径,使得车辆可以在标准的道路模型中安全可控的移动。同时,精准的车道线识别也是高精度地图定位的重要依据之一。针对当前基于语义分割的车道线识别方案易受环境负样本干扰、鲁棒性差和识别类别无法为自动驾驶提供充分导航信息的问题,首先完善了道路场景模型,在已有标注方案基础上添加新的车道线类别
根系是植物的重要功能器官,其三维实体可视化模拟有助于理解根系生长发育动态、形态与构型特征和营养吸收功能等,特别是在根系通过抗剪增强从而发挥固土护坡作用方面,通过三维实体可视化模拟,借助于图形图像学和计算机辅助等,可便捷的提取植物根系构型参数,比较不同护坡植物种间差别。因此,对护坡植物的选择与配置、及水土保持工程和园林设计制图等具有重要理论与实践意义。据此,论文选取选取黄土区自然坡体6种常见但根系类
肖像浮雕建模技术是一项重要的三维模型重建技术。目前,浮雕作为一种雕刻艺术,其将雕刻元素附加到相同的材质背景中,成为一种极具收藏价值的工艺艺术品。而肖像浮雕凭借着丰富的视觉审美和独特的雕刻方式成为浮雕艺术的典型代表形式,具备独特的艺术魅力和纪念意义。因此,为了满足人们对于风格多样的定制肖像浮雕的需要,计算机图形学与浮雕艺术相互结合已成为计算机图形领域研究的热点内容。通过三维建模技术辅助数字化浮雕的生
智能化管理是养殖业规模化的基础和发展方向。为了实现奶山羊养殖场的智能化和规模化建设,提高奶山羊养殖场的管理水平,本文以西北农林科技大学畜牧教学试验基地的奶山羊图像为研究对象,使用基于通道注意力模块SeNet和GIOU损失函数的YOLOv3算法,实现了奶山羊的目标检测与计数。本文的主要研究内容与结论有:(1)奶山羊目标检测数据集的构建及预处理。针对缺少奶山羊目标检测公开数据集的问题,首先在羊场搭建远