基于双路注意力及梯度重构超分辨率网络的微小车牌识别研究

来源 :安徽大学 | 被引量 : 0次 | 上传用户:sjtygk
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
车牌是区分不同车辆的重要标识。随着车辆的不断增加和交通的日益繁忙,智能交通系统变得越来越重要。同时,车牌自动识别技术在智能交通系统中发挥着重要作用,如视频监控系统、停车管理系统和交通违章摄像头。然而,目前大多数方法都是针对特定场景下的清晰车牌,对于不受限制的远程交通监控场景中的模糊和低分辨率图像,仍然没有一个出色的解决方案,其识别精度可以达到实际应用的标准。在很难继续提高识别算法精度的情况下,我们选择使用超分辨率技术来提升车牌图像的质量,从而为后续的识别阶段提供更清晰的输入。近年来,注意力机制被广泛用于各类计算机视觉任务,可以将注意力机制理解为神经网络在训练时自动区分各区域、各通道信息重要性的机制,提高对重要性高的特征的学习权重,抑制重要性低的特征的学习权重,从而提高网络的表达能力。此外,在超分辨率中,边缘梯度信息也是极其重要的。退化的低分辨率图像相较于高分辨率图像丢失的信息主要集中于高频细节,而高频信息又主要集中在边缘处。为了有效地重构低分辨率图像并改善图像质量,作为图像边缘信息的梯度图被用在网络的训练过程用于指导低分辨率图像的边缘恢复。本文主要针对超分辨率中注意力机制和梯度重构的改进,以及将改进后的超分辨率网络用在微小车牌识别任务中:(1)本文的第一项工作为基于双路注意力超分辨率网络的微小车牌识别研究。针对现实场景中微小车牌识别精度低的情况收集了一个超分辨率车牌数据集(SuperResolution License Plate,SRLP),该数据集分别取自不同的远程监控摄像头,并对车牌框和车牌号进行标注。还提出了一个用于远程监控的自动超分辨率车牌识别框架(SuperResolution License Plate Recognition,SRLPR),可以远程识别低分辨率的模糊微小车牌。超分辨率模块采用的是双路注意力生成对抗网络(Dual Branch Attention Generative Adversarial Network,DBAGAN),双路注意力机制与超分辨率网络的结合可以有效地提升网络的性能。超分辨率模块作用于单字符车牌图像,主要用于恢复字符的边缘信息。在网络的学习过程中,图像每个位置特征的重要程度都不相同,字符边缘包含的特征要比字符内部填充的颜色特征更重要,车牌中背景的部分应该获得的关注度则最低,甚至可以忽略;而图像中每个通道特征的注意力权重也各不相同。针对这一特点,对空间级注意力机制和通道级注意力机制进行融合,空间级注意力机制侧重于图像空间位置特征关注度的学习,通道级注意力机制则用于区分特征图中各通道的重要性。(2)本文的第二项工作为基于梯度重构超分辨率网络的微小车牌识别研究。将梯度图作为超分辨率重构的先验信息可以指导网络学习图像的高频信息。基于梯度重构的超分辨率网络相比普通的单图像超分辨率网络模型,多了一条梯度重构分支,该分支的输入为低分辨率图像对应梯度图,输出为超分辨率图像梯度图,梯度重构分支包含与原先分支类似的结构和基础模块,特定网络层的特征图作为辅助特征与超分辨率分支的特征进行融合以增强网络的表征能力。新增的梯度损失分别计算梯度重构分支输出的超分辨率梯度图、超分辨率图像对应梯度图与真值图像梯度图间的损失,能够有效地恢复出低分辨率图像的边缘细节。(3)本文的第三项工作是将双路注意力模块嵌入到梯度重构超分辨率网络中,网络的总体框架采用梯度图作为重构分支,超分辨率分支和梯度重构分支中的基础模块采用双路注意力机制的同时保留了ESRGAN中残差密集块的结构。实验结果表明,相较于单独使用双路注意力机制和梯度重构分支,二者的融合不论是对超分辨率图像质量的提升,还是对最终车牌识别精度的提高都有进一步的增益,同时也表明了双路注意力机制和梯度重构分支良好的泛化能力和可实施性。
其他文献
深度学习模型的训练基于大量数据样本,这些数据的收集通常来源于多方,里面可能含有大量个人隐私数据,相比于把所有数据集中到一起,分布式学习可为用户提供更好的隐私保护。根据网络拓扑结构不同,分布式学习可分为有中心节点(参数服务器)和无中心节点(去中心化)两种。最近的研究表明去中心化算法具有较低的通信复杂度和与参数服务器算法相同的收敛速度。去中心化学习中,每个参与者与自己的邻居节点交互参数,这种情况下,即
学位
伴随互联网技术的出现,各类在线社交媒体平台逐渐兴起,人们开始倾向于通过社交平台进行信息交流。用户通过信息交流而产生的转发行为形成了信息级联,信息级联不仅包含用户的社交活动信息,也反映了用户的喜好、价值取向等。因此,基于信息级联,对用户社交数据信息进行挖掘并分析是一项有价值的研究工作。影响力最大化与影响力预测是社交信息研究的重要方面,影响力最大化研究中通过评估用户的影响传播范围能够了解信息扩散的必要
学位
车辆路径问题(Vehicle Routing Problem,简称VRP)是物流配送领域中研究最广泛的优化问题之一。在传统的VRP中,通常假设客户需求和运输成本是固定的,并且这些值在路线规划前已知。然而在实际应用中数据通常会存在一定的不确定性,此时由传统进化算法获得的解决方案在面对这些不确定性情况时,可能会产生一些超出预期的问题,例如,当客户的需求不确定时,由传统进化算法得到的解决方案可能会发生车
学位
PU(Positive and Unlabeled,简称PU)学习作为弱监督学习的一种,是当前机器学习的研究热点。其目的是从正样本和无标签样本中学习一个分类器,实现对未知样本的有效分类,近年来在不同领域得到了广泛的应用。然而随着PU学习应用的推广,真实应用场景中存在数据维度高以及数据包含噪音等问题,这使得现有的PU学习算法难以获得高性能的PU分类器。为此,本文针对PU学习中存在的上述问题,在多目标
学位
阿尔茨海默症(Alzheimer’s Disease,AD)是中老年人群中常见的进行性神经系统疾病,缺少有效的治疗手段,患者患病后逐渐由健忘发展到严重痴呆,最终导致死亡。当前缺乏AD的有效检测手段,很多患者直到晚期才被发现,如果能够提前预测AD,并介入治疗,能够有效延缓AD的发展进程,改善患者的生存质量。尤其是轻度认知障碍(Mild Cognitive Impairment,MCI),医疗界将其视
学位
报纸
机器学习主要研究从数据中生成“模型”,但是要生成有效地模型,则必须有足够的有标签数据。然而,在许多实际应用场景中,为数据打上标签是非常耗时和昂贵的。主动学习是解决这一问题的主流方法,其主动选择一些对于模型有“价值”的样本加入训练集,旨在以尽可能小的数据标记成本训练得到预期的模型。主动学习的核心是样本选择策略,合理的策略可以有效地降低数据标记成本。尽管现有的样本选择策略能够显著降低数据标记的量,但仍
学位
科技的进步推动了人工智能的发展,而人工智能的成功离不开机器学习,尤其是深度学习技术的不断成熟。进行深度学习训练需要用到大量数据,但是随着人们隐私安全意识的提升,数据收集过程受到了越来越多的阻碍。而且在某些特殊领域想要得到准确的数据还存在一定困难。协同深度学习系统不需要将数据进行集中收集后交给第三方机构保管,其允许拥有数据的组织联合起来训练一个深度学习模型,解决了上述传统深度学习面临的数据收集和隐私
学位
由于密码子的简并性导致编码氨基酸不发生改变,同义突变过去很长一段时间被认为对生命活动没有功能影响。然而,随着测序技术的高速发展和相关研究的不断深入,越来越多同义突变被证明和疾病发展有密切关系。从大量同义突变中准确识别有害同义突变,可以提高人类对疾病病理的认识,并为精准医疗的发展提供帮助。因此,精准识别有害同义突变逐渐变成一项具有前景的任务。通过传统生物实验的方法来识别有害同义突变,耗费时间长并且成
学位
随着互联网技术高速发展,数字媒体成为了生活中重要的一部分。计算机,电子通信有关技术日新月异,多媒体有关技术也随之不断更新与完善,但是相关安全问题也随之而来。为了解决数字媒体中存在的严重安全问题,信息隐藏技术得到了广泛关注。此外,随着许多用户将个人的私密数据上传到互联网中相关平台进行存储,用户信息遭到泄露的风险显著增加。因此,将传统的图像加密运用到可逆信息隐藏算法中的技术,即密文域可逆信息隐藏技术受
学位