面向机载边缘设备的低功耗无人机目标检测系统的研究与实现

来源 :云南大学 | 被引量 : 0次 | 上传用户:sea0075
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着无人机和边缘计算技术的发展,基于螺旋翼的小型无人机应用在城市巡检、灾难救援、区域监控等领域越来越常见,目标检测技术在这些应用中发挥着关键的作用。例如通过无人机检测城市路口的车辆从而进行车流量监控,在地震、火灾等灾难场景中迅速抵达灾难区域检测待救援人员的位置。但是目前基于无人机的目标检测应用存在如下限制:1)无人机由于体积和功耗的限制,满电的一次飞行时间通常只有20~30分钟,无法长时间执行任务。2)边缘设备可以保证实时性和隐私性,但是由于体积和功耗的限制,计算能力一般十分有限,目前基于深度学习的目标检测算法部署在边缘设备上的性能不容易满足实际任务的需求。3)无人机由于在高空执行任务,其目标检测通常是对小目标的检测,目前目标检测算法对小目标的检测精度并不是很高。为了解决以上问题,本文首先利用轻量级框架、量化、并行化、按图片输入特性降低输入分辨率等优化方法大幅提高了YOLOv3算法在基于GPU的边缘设备上的部署性能。之后通过优化YOLOv3算法的预选框范围提升了其对小目标的检测能力。最后利用大量的实际飞行数据,设计出低功耗的无人机目标检测系统,提高了无人机执行任务时的能效性,使无人机在相同的能耗下,有更高的检测性能和更长的任务执行时间。本文的主要贡献如下:(1)设计了一个基于边缘计算设备的无人机低功耗目标检测系统,系统可以根据用户设定的任务目标来推荐合适的飞行高度、飞行速度、目标检测算法模型和算法采样率来使无人机在完成任务目标的情况下消耗的能耗最少。系统还支持用户自定义无人机、边缘计算设备、目标检测算法模型的参数来提供对不同的设备和模型的支持。实验表明,在对小汽车的检测中,系统推荐的飞行参数在满足任务要求的同时,相比于最邻近的飞行高度和速度组合,能耗最高降低了17.07%;在对行人的检测中,能耗最高降低了26.68%;与手动飞行相比,在能耗基本相同的情况下,可以使检测召回率提升7.37%。本系统与其他类似系统相比,不仅专门优化了目标检测算法的性能和部署表现,还以简洁的系统API来帮助用户在实际应用中应用系统。(2)建立了一个无人机和边缘计算设备能耗的计算模型,可以根据设备参数计算不同高度和速度情况下的无人机和边缘计算设备的能耗,为执行任务时能耗的估计提供了基础。同时还提出了基于能耗优先的飞行参数推荐算法,支持对不同的无人机、边缘设备、算法模型在基于能耗优先的情况下结合能耗和任务要求推荐合适的飞行参数。实验表明,相比于其他飞行参数,算法推荐的飞行参数在能耗上有所降低。(3)提出了针对无人机应用的目标检测算法在边缘计算设备上的部署优化方式,利用轻量级框架、量化、并行化、按图片输入特性降低输入分辨率等优化方式优化了YOLOv3在边缘设备上的部署性能。实验表明,在不降低精确度的情况下,算法的推理速度在NVIDIA Jetson Nano上由3.9FPS提升到了10.5FPS,在NVIDIA Jetson Xavier NX上由12.6FPS提升到了30.3FPS。(4)优化了YOLOv3算法预选框的选择范围以提高其对小目标的检测效果,利用Vis Drone数据集训练后,在416*416的输入分辨率下,AP50由11.85%提高到了18.39%。
其他文献
差分进化算法(Differential Evolution,DE)是一种典型的随机优化算法,其主要通过变异、交叉和选择操作的循环迭代来进行全局搜索,其中变异操作对算法的影响尤为显著。尽管至今为止已经有各种类型的DE算法变体被相继提出,但在某些复杂工程优化难题上,DE算法及其变体仍然容易遭遇种群早熟收敛、搜索停滞等问题。其中一个很重要的原因就是算法的全局勘探(Exploration)和局部开发(Ex
学位
报纸
以乙二醛替代甲醛合成木材浸渍改性用三聚氰胺-尿素-乙二醛(melamine-urea-glyoxal,MUG)树脂,通过对不同温度、p H值、原料配比条件下合成的MUG树脂性能进行分析,优选出较佳的合成工艺,并用优化工艺合成的MUG树脂对杨木进行改性。结果表明:当反应pH值在4~5,反应温度为65℃,M、U、G量比为0.08∶0.40∶1.00时,合成的MUG树脂性能较佳,黏度为15.01 s,固
期刊
图着色问题是最著名的NP-hard问题之一,在现实应用以及理论研究方面都有很重要的意义。目前解决图着色问题的方法主要有两种,精确和启发式。启发式算法有快速的求解能力和很强的通用性,在实际问题中通常能找到最优或者接近最优的解。禁忌搜索算法是一种启发式算法,它应用于图着色问题能带来高质量的解,命名为Tabucol。禁忌搜索算法是在局部搜索的基础上引入禁忌列表和相应的管理规则来实现的,它有效的避免了搜索
学位
在新型冠状病毒肺炎(COVID-19)的诊疗中,专业医师通过观察患者肺部CT影像病灶情况判断病情,这和标签为分割图的医学影像分割任务类似,目的在于提取目标影像中感兴趣的区域,如病灶、组织器官等,由于CT影像数量较多,专业医师工作量较大,因此利用计算机辅助医师诊疗有重要意义。医学影像常缺少金标准数据,从半监督学习角度出发,可以减少对金标准数据的依赖。一些半监督分割方法通过一致性正则化得到高质量伪标签
学位
伪造图像或视频的检测一直是计算机视觉与信息安全领域的研究重点。随着诸如自动编码器和生成对抗网络等深度生成模型的显著发展与进步,人们现在可以轻松地使用开源工具甚至移动应用操纵图像和视频。最为知名的deepfake是指基于深度学习制作的虚假多媒体内容,即深度伪造。鉴于deepfake较低的制作门槛且高质量的伪造效果,这些技术很容易被恶意者滥用,包括传播虚假新闻,色情报复,金融欺诈甚至影响政治舆论。因此
学位
零次学习是指可以在数据类别不含标注信息的情况下进行模型学习的任务。零次学习是模型学习推理能力的学习。零次学习近两年飞速发展,衍生出了各种各样的方法。这些方法都是围绕如何将模型在训练集上获取的知识应用在测试集的预测中。本文针对零次学习难点中的领域漂移、枢纽点和语义间隔问题进行解决。(1)针对语义间隔问题,本文提出了3种针对零次学习中常用数据集自动构建知识图谱的方法。分别为基于原始属性语义空间,自然知
学位
在建筑工程中,建筑屋面是非常关键的结构之一。建筑屋面需长期暴露于外界中,受多种因素影响,非常容易产生渗漏问题,降低工程质量、影响业主体验。文章以某A建筑工程为例,立足于屋面施工实际,从施工准备、技术应用、排水系统设置、质量控制等方面总结施工技术,增强屋面的防水性、安全性与稳定性,对建筑工程运行与建筑企业发展具有深远意义。
期刊
生态文明教育是社会主义现代化建设的必然要求,也是新时代德育工作的重要内容。初中道德与法治课是对学生进行德育的主阵地,对初中生进行生态文明教育是顺应国家生态文明建设,培养生态文明建设人才的应有之义。初中生生态文明教育应以习近平生态文明思想为根本指导思想,促进人与自然和谐共生为基本价值追求,涵盖生态文明理论知识、法治教育,树立生态文明协同观、科技观、权义观等教育,通过各种手段让学生感受生态之美,培育学
学位
随着人工智能时代的到来,以及人们对于隐私的要求,越来越多的深度学习模型部署到边缘系统上形成边缘智能系统。边缘智能系统通常来说计算资源和能耗受限,而DNN的复杂度越来越高,因此边缘智能系统的计算能力很难满足DNN的计算需求。同时,在边缘智能系统中也有众多延时敏感和各种需要实时计算的场景,在这些场景中,对模型的时间要求较高,这进一步加大了在边缘智能系统中部署神经网络的难度。因此,研究人员提出了一些技术
学位