基于深度学习的移动端葡萄图像识别研究与实现

来源 :华中农业大学 | 被引量 : 0次 | 上传用户:gundamet
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在人工智能浪潮的推动下,对果园实行智能化管理势在必行,这其中对果实的自动识别检测又是实现智能化种植、采摘的重要前提。自然环境下果园葡萄的检测存在叶片、葡萄相互遮挡和光线照射不均匀等问题,对于绿色葡萄的检测来说更为突出的问题是前景(绿色葡萄)和背景(葡萄叶片)相似,使得通过手动进行特征提取的常规检测方法难以进行准确检测,而基于卷积神经网络的检测方法因可以自动提取更加丰富的特征,并采用端到端的方式进行训练和检测,能够满足葡萄果园场景的检测需求。本文以葡萄果园场景中的葡萄作为研究对象,利用深度卷积神经网络对自然场景下果园葡萄进行自动检测,并设计果园葡萄检测系统,实现了对于果园葡萄快速、高效的检测,为葡萄的智能化采摘打下坚实的基础。主要研究工作与结论如下:(1)葡萄果园数据集的建立。鉴于国内缺少葡萄果园数据集,本文通过在果园实地拍摄的方式,采集了共11种葡萄的3223张图像,并进行手动人工标注,建立Pascal VOC格式的果园葡萄图像数据集。数据集中包含不同光照条件、不同拍摄距离、不同拍摄角度下的葡萄图像。为进一步扩大数据集,提高训练数据多样性,对数据集使用水平翻转、平移、随机块采样等方法进行数据扩增,共得到15334张训练数据,325张测试数据。(2)基于ROI Align的Faster R-CNN果园葡萄检测方法。首先对Faster R-CNN中的特征提取网络进行改进,结果表明使用具有更多层数的残差网络模型Res Net101来提取特征比使用VGG16、Res Net50提取特征,m AP0.5:0.05:0.95分别要高出10.5%和5.1%。其次使用ROI Align对不同尺寸的特征图进行固定,从而避免ROI Pooling在两次取整过程中带来的像素损失,实验结果表明使用ROI Align的Faster R-CNN网络在检测精度上要优于使用ROI Pooling,m AP0.5:0.05:0.95达到0.9102,满足果园葡萄检测需求。(3)基于Mobile Net的SSD果园葡萄检测方法。为了满足葡萄果园复杂场景下移动端识别的需要,减少对高性能GPU的依赖,本文将SSD网络与轻量级的特征提取网络相融合,同时针对数据集中存在负样本(背景区域)远远多于正样本(葡萄)以及简单样本和难样本不均衡的问题,使用损失函数Focal loss进行样本分类。实验结果表明,以Mobile Net V2作为特征提取网络、使用深度可分离卷积替换SSD网络预测层中的标准卷积、参数γ=2、α=0.75的Focal loss作为分类损失函数时,模型性能最优,m AP0.5:0.05:0.95达到0.8803,比未使用Focal loss的Mobile Net V1_SSD、Mobile Net V2_SSD、VGG16_SSD分别高出4.4%、5.3%、5.5%。同时Mobile Net V2_SSDLite在小米M8 Lite上的单幅图像平均检测速度为100ms,满足葡萄果园实时检测需求。为适应果园葡萄图像中的多尺度大小的检测需求,将FPN网络与Mobile Net V2_SSDLite网络相融合,m AP0.5:0.05:0.95达到了0.9054,在小米M8 Lite上的单幅图像平均检测速度为153ms。(4)果园葡萄检测系统的设计与实现。本文基于安卓操作系统设计并开发了移动端果园葡萄识别系统,分为离线检测和在线检测两种模式,实现了果园葡萄检测等功能。并将Mobile Net V2_SSD模型部署到Jetson Nano上,在使用多线程处理任务后,单幅图像的检测速度为43ms,为后续采摘机器人的研究打下坚实的基础。测试结果表明移动端果园葡萄识别系统在检测精度和检测速度的实时性上满足葡萄果园实际需求,具有一定的理论和实际应用价值。
其他文献
会议目的地的城市定位使厦门的会议业得到了快速发展,这给厦门的会议酒店带来了巨大的发展机遇。厦门佰翔酒店集团运营总监王晖表示:“目前会议酒店已没有淡旺季之分,全年都保持
8月6日,中国科学院与中国利仂在国家会议中心联合召开了2012年第二十八届国际天文学联合会大会(IAU大会)新闻发布会暨签字仪式,会上介绍了IAU大会的筹备隋况,宣布国家会议中心将成
在欧阳中石的博士弟子中,杨志恒是50岁才走到老师身边的,他丰富的社会阅历,深厚的文化积淀,扎实的书法功底,引起了我们极大的兴趣,带着尊敬和好奇我们采访了杨志恒博士。
感悟是一种心智活动,一种情感经历,一种审美体验。《语文课程标准》中提出:“(阅读教学)应让学生在主动积极的思维和情感活动中,加深理解和体验,有所感悟和思考。”可见,感悟在阅读教
郝蕾像一杯红酒,看起来很剔透、入口,其实有点微辣,而且后劲十足。2012年12月的北京,气温已至-15℃,"北京山水回声文化艺术工作室"里,郝蕾和她的团队正在热议筹建一个纯公益
一哥们说什么样的女人值得爱,讲了个故事:多年前跟一女的躲进一茶楼,看菜单最便宜的480一壶。我心中顿时想起了董存瑞,马上又想起了黄继光,最后想起了雷锋。暗忖在女人面前不能丢人,决心咬碎银牙装大款。结果那女的却大喝一声:我们走!牵着我昂首挺胸阔步而出。  我笑,原来搞定男人这么简单,约个最高档的地方喝茶,看完价目单就撤!对方感激涕零,你轻易就打造了不虚荣不破费善解人意持家有方的形象。而他,还会生出一
根据氯离子型层状复合氢氧化物(LDH-Cl)制备过程中溶液浓度变化的监测结果和不同反应进程时产物的EDS、IR、XRD、rEM、TG-DTA表征结果,研究了合成LDH-Cl的共沉淀反应动力学特
管伟骏简介1956年生于上海,1990年去比利时留学,曾就读于比利时皇家美术学院,毕业于法国第八大学造型艺术系,获硕士学位。现为比利时皇家美术家协会会员,比利时功勋美术家协
采用循环伏安法和原位表面增强拉曼光谱(SERS)研究了乙醇在粗糙铂电极上的吸附和氧化行为,获得了乙醇在粗糙铂电极上解离吸附的表面增强拉曼光谱.研究表明,在酸性介质中,乙醇
政府补贴与行政调控价格如影随形,是恶化市场的两大法宝今年出台的房地产调控手段中,最见效从日化品到电煤,发改委控制价格之手从生活用品转向上游资源性企业。4月2日,发改委