无人机航拍图像目标识别与跟踪

来源 :东南大学 | 被引量 : 0次 | 上传用户:xipuwa
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着无人机技术的发展,无人机被广泛应用到军事,工业和民用等领域,无人机航拍目标识别与跟踪也成为研究热点。由于航拍图像中场景复杂、目标尺度不一,还存在光照变化、遮挡干扰和相机抖动等问题,航拍图像中目标识别和跟踪变得更加困难。针对这些问题,本文对无人机航拍图像目标识别与跟踪进行了研究,主要完成了以下工作。首先,对YOLOv4检测模型进行改进,提出了一种基于多尺度特征融合的航拍图像实时检测模型,通过以CSP-Dark Net作为主干网络,构建全局与局部信息融合的特征金字塔结构,并在YOLOv4三个检测层的基础上,添加一个针对小目标检测的检测层,构建四层多尺度检测层,并在Vis Drone2020 DET数据集上进行训练和测试。改进后的模型相比于原始YOLOv4在航拍图像目标检测任务中各项性能指标均有所提升,其中行人和轿车召回率均提高9.6%,整体召回率提高5.5%,m AP提升5.2%,同时检测速度几乎不下降,有效验证了本文提出的检测算法对航拍场景中行人和车辆具有良好的检测性能。然后,为了实现航拍图像中目标跟踪,采用基于运动预测与检测数据关联的多目标跟踪算法。通过卡尔曼滤波进行目标运动状态预测,计算检测结果和预测结果之间的IOU,作为空间相似度度量构建损失矩阵,再利用匈牙利算法实现检测结果和跟踪预测的关联匹配,同时引入目标跟踪器管理模块来管理跟踪目标的生命周期。实验结果表明该算法可以对目标进行有效地跟踪,但在目标身份误变换(IDsw)问题上仍需改进。最后,为了降低目标身份误变换(IDsw)次数,本文在基于运动预测与检测数据关联的多目标跟踪的基础上,构建目标表观特征提取网络,在多目标跟踪过程中引入目标表观特征,提出了基于空间信息与表观信息融合的多层关联匹配机制。实验结果表明融入表观信息的多目标跟踪增加了检测和跟踪轨迹之间关联的线索,有效地减少了IDsw,目标跟踪更加稳定。
其他文献
膜污染是制约膜生物反应器推广应用的关键因素之一,胞外聚合物(Extracellular Polymeric Substances,EPS)是膜污染的主要成分,含有丰富的有机质,具有作为外加碳源的巨大潜力。微生物燃料电池(Microbial Fuel Cell,MFC)作为一种新兴的污水处理技术,能够在处理污水的同时产生电能。本研究针对EPS可生化性差、难以直接作为MFC碳源的问题,以实际EPS作为
体积不断缩小的物联网节点对芯片大小的要求变得越来越苛刻,为了节省外部时钟晶体,片上RC振荡器成为有效的替代方案。然而,温度、电压变化和内部噪声都会引起RC振荡器的频率偏差,当频率偏差积累产生较大计时误差时,会出现信号收发失配、数据丢包等严重问题。针对上述情况,本文设计了一种能够进行实时频率校准及锁定的高稳定性RC时钟振荡器。负反馈的锁频环路避免了频率偏差的累积,改善了内部噪声决定的长期稳定性,是输
随着我国整体经济发展水平的不断提高,在广大村镇区域也存在着提高建筑抗震安全度的迫切需求。村镇砌体房屋多数都未经过严格的设计和施工,抗地震倒塌能力较差,面临严峻的地震灾害威胁。本文通过数值模拟方法,针对村镇典型砌体结构进行了地震抗倒塌性能研究和倒塌易损性分析,揭示了结构在地震作用大变形条件下的倒塌机理和倒塌模式,获得了结构倒塌易损性曲线。主要研究工作及结论如下:(1)基于通用有限元软件MSC.Mar
生物高分子聚合物是一种有机聚合物,可作为一种环境友好型的固化材料对松散砂土进行加固,在地基加固以及荒漠化治理等领域具有潜在的应用价值。本文通过室内试验的方法研究了两种生物高分子聚合物HG、GG及其混合物MG(HG与GG按1:1的质量比例混合)对沙漠砂力学性能的提升作用及其促生性能,主要工作及结论如下:1.将HG、GG、MG按不同比例掺入干燥的沙漠砂,制样方式为掺粉加水法,将试样在40℃干燥环境下分
司法机关为了提升监督的有效性,很多场合依规要求社区矫正对象利用手机进行日常打卡和思想汇报,但实际工作中普遍存在的“人机分离”、“冒名打卡”等问题,亟需在现有设备条件下,以有限的成本将人脸识别引入系统来解决此问题。然而,面向手机用户单纯的人脸识别系统极易受到人脸打印照片、电子照片或视频等非活体攻击,需结合适合的人脸活体检测技术以提升人脸识别系统的安全性。相比其他人脸活体检测实现方法,静默活体检测因识
生物质与煤的共燃烧技术是一种在污染物和温室气体排放问题上同时兼备环境效益和成本效益的燃烧技术。然而,影响该技术可行性的关键之一是生物质中碱金属含量高所带来的灰沉积、腐蚀等问题。由于生物质中相对较高的K含量(尤其是对于草本植物而言),在混合燃烧过程中,碱性物质(如KCl)可能因为高化学活性而转移到气相中,从而造成锅炉受热面积灰、结渣和腐蚀,进而导致传热能力降低,热损失增加,锅炉偏离设计工况运行,大大
学位
随着全球能源的快速消耗,越来越多的国家开始注重资源的节约和环境的保护。尤其是作为能耗最高的建筑业,备受各个国家的关注。在德国率先推出被动房这个概念后,许多国家也开始引进被动房。被动房建筑不受楼栋类型的限制。研究被动房的各方面性能,倡导被动房这种节能建筑概念,不仅是推动我国建筑节能工作的重要契机,同时对于我国绿色建筑的发展具有非常重要的意义。本文研究的被动房装配整体式发泡混凝土剪力墙,是把高强度高热
传统钢筋混凝土(RC)框架结构由于柱失效引起的连续倒塌行为已经得到了广泛的研究。然而,从材料层次出发,通过提高筋材的力学性能来增强结构倒塌抗力的研究还较少。钢-纤维复合筋(Steel-FRP composite bar,简称SFCB)由外包纤维和内芯钢筋组成,最鲜明的特点是具有稳定可控的二次刚度(屈服后刚度)。因此,本文用SFCB替换RC框架梁中普通钢筋,基于拆除构件法,对SFCB增强混凝土结构的
在大尺度复杂作业环境下,基于三维激光扫描仪的传统测绘建图方法存在耗时长、缺乏区域语义信息等问题。本文针对结构复杂、场景跨度大、存在光线变化的作业环境,研究了融合相机和激光雷达传感器的移动式分段扫描建图系统,设计了一种基于场景识别的区域语义学习方法,并开发了稠密建图和点云语义标注功能应用软件。首先针对常规地图缺少高质量地图数据的问题,通过相机和激光雷达的联合标定与数据融合,使得图像的色彩信息能够融入