基于深度学习的果实检测跟踪系统的研究与实现

来源 :北京工业大学 | 被引量 : 0次 | 上传用户:winbourbit
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能和计算机视觉等技术的快速发展,智慧农业迎来了空前的发展机遇,其中目标检测跟踪技术表现出了极大的应用价值,该技术对于实现果实产量统计、果实自动采摘、果实长势分析和果园自动化管理具有重要现实意义。其中,收获果实之前准确地估计果园产量,有助于种植者更好地制定果实收获作业计划和市场营销策略,帮助农民种植者带来更多的经济效益;在未来,将有助于部署采摘机器人工作策略,使其高效地完成采摘任务,实现果园智能化生产。本研究以田间柑橘作为研究对象,研究目标是利用果实检测跟踪技术对采集的田间果实视频序列进行处理,统计出视频序列中柑橘果实数量。然而,在实际田间环境下,柑橘果实尺度较小、生长密集,被树叶遮挡以及柑橘果实之间遮挡情况严重,导致难以准确检测出每个果实目标,从而影响产量估计准确性。针对以上问题,本文设计了一套基于深度学习的果实检测跟踪计数系统,主要研究内容如下:(1)面向数据终端的田间果实检测算法Orange Yolo。此算法主要应用于计算能力强的大型数据终端平台,比如NVIDIA Geforce GTX 1080Ti。首先基于特征图感受野与目标尺度相匹配的原则,通过对田间柑橘数据集进行K-means统计分析,以Dark Net53为主干网络,在保证多尺度目标检测功能基础上,设计了一种检测小尺度目标的网络结构。其次,为了高效融合不同卷积层特征的关键信息,设计了一种基于通道注意力和空间注意力的双注意力多尺度融合模块(Dual-Attention Multi-scale Fusion,DAMF),增强融合特征的通道特性和空间特性,并自适应地将深层网络的语义特征与浅层纹理细节特征相融合,提升小尺度果实检测精度。(2)面向边缘设备的轻量化果实检测算法Orange Yolo-Light。此算法主要应用于计算能力较小的轻量化、便携式计算平台,如NVIDIA Jetson Xavier NX。首先基于CSPNet网络结构,设计了一种轻量级的网络模型Light-CSPNet,在保证良好精度的同时,降低网络复杂度和计算量,大幅度提高了检测速度,实现在轻量化设备Jetson Xavier NX上实时推理运算。其次,设计了一种深浅层特征融合模块,将浅层、中层、深层特征进行融合,并利用三个不同尺度融合特征进行果实检测,大幅度提高小目标定位精度。(3)田间果实多目标跟踪计数算法Orange Sort。首先通过分析田间果实视频序列中果实目标移动特性,对多目标跟踪算法Sort进行改进,提出一种基于运动位移相似性进行目标位置估计方法,有效减少跟踪过程出现的目标ID频繁变换状况。其次,通过分析柑橘果实在全局视频序列中的复杂遮挡情况,提出了一种特定跟踪区域计数策略,在全局视频序列中画定计数区域,仅对计数区域内的果实进行跟踪计数,以克服全局视频序列中果实复杂遮挡情况所导致的果实重复计数问题。本文利用采集的田间柑橘视频数据分别进行检测算法和跟踪计数算法的实验,面向数据终端的田间果实检测算法Orange Yolo的平均检测精度达到0.938;面向边缘设备的轻量化果实检测算法Orange Yolo-Light在Jetson Xavier NX上的平均检测精度达到0.930,推理速度达到21.3fps;果实多目标跟踪计数算法Orange Sort在六段柑橘视频序列的平均计数误差仅为0.081。结果表明,本文的果实检测算法检测精度和推理速度均取得了较高的性能,能够在田间环境下快速精准的完成果实检测任务,并且果实跟踪计数算法的计数精确度也达到了较高的水平,具有实际应用价值。
其他文献
<正>小学阶段是学生学习英语的最佳时期,课堂教学质量将在很大程度上决定着学生英语基础建设。因此,在新时期的小学教育领域,教师需要重点关注英语教学,并根据小学生兴趣需求,对教学方法进行创新,合理引进游戏教学活动,为学生营造良好的英语课堂环境,从而保证小学阶段的英语教学更加有效。鉴于此,本文主要围绕小学英语课堂游戏教学中存在的问题,以及相关解决对策展开有效分析,从而为强化英语素质改革提供重要的
期刊
山药是药食同源的食材,山药多糖是其中重要的生物活性成分之一。山药多糖具有调节免疫、调节血糖、抗氧化等作用。本论文从山药多糖的提取、分离纯化、结构特征及血糖调节活性等方面进行了研究。具体研究结果如下:以山药多糖的提取率为指标,利用响应面分析法对山药多糖的浸提工艺进行优化。得到最佳提取工艺参数为:浸提温度71℃、时间2 h、料液比1:10.5,多糖提取率为11.92%。通过水提醇沉、除色素和Sevag
<正>各领域企业发展建设均需符合现行税收政策,以政策为导向开展企业税务管理工作。为保障税务管理实效,应做好企业税务审计工作。基于此,本文从不同角度分析了企业税务管理中税务审计工作的重要作用,并进一步提出企业税务审计的强化措施,旨在通过税务审计工作强化企业税务管理,规避各类涉税风险。
期刊
<正>受疫情等多种因素影响,2020年全国儿童青少年总体近视率为52.7%,较2019年上升了2.5个百分点,但较2018年仍下降0.9个百分点,达到了每年下降0.5个百分点的防控目标。2021年,在各方的努力下,近视防控工作初见成效。
期刊
<正>党的二十大吹响了全面建设社会主义现代化国家、全面推进中华民族伟大复兴的号角。这个历程不会是一帆风顺的,尤其是在国内外局势日益复杂的情况下。正是在这种压力背景下,习近平总书记在党的二十大报告中号召全党同志要做到“三个务必”,包括“务必敢于斗争、善于斗争”,提出“加强干部斗争精神和斗争本领养成”,体现了对党员干部斗争精神和斗争本领的突出强调。这是在党中央审视中华民族伟大复兴战略全局和世界百年未有
期刊
<正>虎年即将到来,读写君最近在《国家级非物质文化遗产代表性项目名录》中找到了一个和老虎有关的项目——黎侯虎。说起这名字,你可能有些摸不着头脑。其实,黎侯虎就是我们常说的布老虎。为何布老虎要叫这个名字?它有什么特色?又为何能被选为非物质文化遗产呢?今天,就让读写君好好跟大家讲讲!
期刊
[目的]:探究导航实时校准技术与普通导航在青少年特发性脊柱侧凸经后路矫形术中置钉精度方面的差异及导航实时校准技术的临床应用价值。[方法]:回顾性分析研究2017年01月至2021年01月在海南医学院第一附属医院脊柱外科明确诊断为青少年特发性脊柱侧凸行经后路矫形植骨融合内固定手术患者共计40例。根据有无使用定位针导航实时校准技术,分为导航校准组和普通导航组。其中导航校准组辅助置钉患者共21例,普通导
使用外标法,建立一种使用气质(GC-MS)联用仪检测纺织品中潜在的17种有机锡化合物的方法,并确定优化的衍生化前处理条件,即:pH值4.0,衍生化时间30 min,衍生试剂用量1.00 mL。在此方法条件下可以方便、快速地检测出17种有机锡化合物。希望研究结果可为相关研究和检测提供帮助。
后疫情时代,我国制造业面临着巨大挑战,如何用新时代发展理念引领传统制造业转型发展并取得成效,目前研究尚浅。本文基于扎根理论研究,通过收集和处理高端智能制造业在后疫情时代的转型发展,挖掘出7个主范畴及2个核心范畴,同时通过进一步的数据分析发现,新发展理念对制造业高质量发展起着正向作用。
为探究不同测量方法获取浅沟数据的精度,本文以元谋干热河谷区浅沟为例,采用RTK、三维激光扫描、近景摄影测量等多种测量方法获取浅沟数据,建立DEM并提取浅沟形态参数,对比近景摄影测量以不同方式获取标记坐标后建立DEM的差异,同时以测针板实测浅沟横剖面为参照,对比分析不同测量方法获取浅沟横剖面的精度。结果表明:RTK获取密度较低的点数据,建立的DEM较粗糙,仅体现沟缘大致走向;近景摄影测量+RTK方法