面向小目标识别的超分辨率方法

来源 :南京大学 | 被引量 : 0次 | 上传用户:tanwenbin89
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像中目标分辨率的缺乏对传统目标识别算法的性能造成了严重的影响,特别是在远距离的广角监控视频、无人机远程、航空影像等场景下。超分辨率技术作为计算机视觉领域的核心技术之一,已经成为解决此类小目标识别问题的一种流行又极具挑战性的方案。但在传统的超分辨率动机和小目标识别所需要的动机之间存在着本质的区别。前者旨在提高目标的视觉清晰度,而后者则是通过增强特定特征来提高分类器的识别精度。近期的工作在超分辨率的学习过程中纳入识别任务的目标以指导超分辨率模型的优化,在某个程度上解除了传统的超分辨率增强与识别动机不一致的制约,但并未深入探究联合小目标识别任务的超分辨率方法的具体要求和设计。本文系统研究了面向小目标识别的超分辨率技术,探究如何将识别任务的目标纳入超分辨率过程,建议联合超分辨率和识别网络在一个端到端的框架中,同时从联合框架结构、先验监督及训练方式这三方面的设计展开研究,提出了若干新的模型和算法,使传统的超分辨率技术可以通过自适应调整后应用于小目标识别任务中。本文的主要贡献如下:(1)设计并实现了一种端到端的分类结果引导的超分辨率方法,基于级联结构,同时利用分类结果先验,通过系统的协同训练策略以及多个损失的集成函数,有效地利用预先训练好的模型的能力,降低了多网络联合训练的难度,从而提高超分辨率模型对小目标识别的增强效果。(2)设计并实现了一种端到端的识别特征驱动的超分辨率方法,基于两步模型(超分辨率+特征提取器)的结构,同时利用识别特征先验,通过在训练过程中引入特征驱动损失微调的方式,并设计了多尺度特征提取、融合及对齐机制,有效结合了高分辨率图像深层语义和浅层信息,以生成深度融合的特征信息来增强小目标所需的细节特征,从而提高了对小目标增强识别效果。(3)设计并实现了一种端到端的对抗过程适应的超分辨率方法,基于对抗结构,同时利用对抗和识别过程先验,将超分辨率网络和双任务识别网络分别作为生成器和判别器,通过交替训练两个模块来提高各网络的性能,避免了在超分辨率过程中生成过多对识别任务无用的特征,可自适应不同的超分辨率网络和识别网络。
其他文献
轨道交通业的发展是国家现代化的重要指标,提升轨道交通智能化水平是我国“十四五”规划的内在要求。为提高轨道客车的舒适性及运行速度,铝合金广泛用于车体结构中。然而,铝合金焊接存在焊接速度慢、易产生焊接缺陷等问题,大大制约了轨道交通业的进一步发展。近年来研究表明,施加外加磁场辅助MIG焊接具有绿色环保、稳定性强、焊接速度快等特点。本课题组也研发了脉冲复合磁场辅助高速焊接工艺,通过在焊枪上安装自主设计的外
学位
学位
目的:通过多模态影像融合技术来重建听神经瘤及周围正常结构的模型,研究肿瘤与周围毗邻结构的显微解剖关系,并测量相关数据,为外科手术提供解剖学基础。方法:选取2017-2020年间武汉协和医院神经外科手术治疗的22例听神经瘤病例,包括男性6例,女性16例,将患者术前的头部MRI和CT相关影像资料通过Brain Lab i Plan Stereotaxy3.0系统进行融合,然后进行模型重建并测量患侧与健
CD47(Cluster of Differentiation 47)是一种具有多种信号功能的抗噬细胞受体。CD47在多种细胞上表达,向巨噬细胞传递“don’t eat me”的信号,阻止巨噬细胞的吞噬作用。细胞如果因生理或病理原因导致CD47受体下调,则更容易被巨噬细胞吞噬去除。SIRPα(Signal regulatory proteinα)是信号调节蛋白家族的一种调节性糖蛋白,主要表达于髓系
钛合金密度低,比强度高,耐腐蚀性好,是良好的耐热材料和低温材料。20世纪以来,我国航空航天事业发展与日俱进,与之相关的钛合金的研制和应用也获得了快速发展,钛加工零件大量地应用于交通、医疗、航空、航天、海洋、建筑等领域。然而,钛合金强度较高,在常温下变形困难,需要较大应力。而热成形中加热装置、耐热模具、高温下的润滑等问题难以解决。振动辅助成形是降低金属成形过程中流动应力、提高表面质量的有效方法,包括
回音壁模式(Whispering gallery mode,WGM)微腔具有Q值高和模式体积小的特点,使得其在传感具有很好的应用潜力。目前由于低阶模只能带来有限的光与物质作用,微腔还无法实现大尺寸(>1μm)微粒探测。然而,由于液芯微腔的高阶共振模式具备液芯能量占比更大、渗透深度更深、光与物质作用更强等优点,更适合作为光与物质相互作用的平台。为此,我们将研究此液芯微腔在微粒计数和传感等方面的应用。
Cu-Cr-Zr合金具有优良的导电、导热性,高的抗软化温度、耐磨等性能而被广泛应用于引线框架、结晶器内衬、电阻焊电极、航空航天等方面。目前,对于Cu-Cr-Zr合金的研究主要是通过合金化、热处理及变形相结合的方法来提高合金的电学及力学性能。本文通过显微组织分析(金相、SEM及EBSD)以及硬度和电导率测试等方法研究了固溶-时效、固溶-冷轧-时效以及固溶-时效-冷轧-退火工艺对高强高导Cu-Cr-Z
古气候的定量重建一直是全球气候研究中的重中之重,中国季风区中的多种地质记录为人们认识亚洲季风的演化及其影响区域的古气候做出了重要的贡献。中国季风区的石笋δ18O记录表明亚洲季风强度变化受北半球夏季日射的影响,呈现出典型的岁差周期(2.3万年)。然而,利用中国北方黄土沉积记录重建的夏季风强度变化在中更新世转换后始终呈现出10万年周期的信号。前者表明亚洲季风受低纬水汽循环的控制,而后者则表明亚洲季风受
无线电能传输技术具有无需布线、无接触和可靠性高等优点,可以为无线可充电传感器网络中的传感器节点提供持续的能量供给,保障了传感器节点的正常工作,延长了整个网络的生存周期,使得节点有望彻底摆脱对电池的依赖,受到了来自学术界和工业界的广泛关注。经过近几年的快速发展,无线可充电传感器网络已广泛应用于数据中心监测、智能电网、智能家居和环境监测等诸多领域。无线可充电传感器网络充电效用优化问题主要关注如何通过部