基于多任务卷积神经网络的视频目标属性识别

来源 :安徽大学 | 被引量 : 0次 | 上传用户:wangchongzhan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着当前监控视频数据的爆炸式增长,如何高效分析视频中的数据内容,并使其为智慧城市服务成为近年来关注热点。其中,对监控视频数据的分析,主要涉及对视频中目标进行定位跟踪以及精细化属性识别两个领域。本文针对上述领域分别研究视频目标跟踪以及目标属性识别等工作,并分别结合多任务学习方法,实现相应的高效算法。其中主要成果有以下两方面:  (1)在目标跟踪领域,尤其是多模态目标跟踪中,仍存在诸多问题。一方面,对每个模态质量的评估方法对多个模态的融合机制至关重要;另一方面,每个模态中的局部信息同样能够提升跟踪目标特征表示的鲁棒性。因此,本文针对如何挖掘目标区域的关联关系以及高效融合多个模态信息这两方面进行改进,提出一种基于多任务拉普拉斯稀疏表示的多任务目标跟踪算法。具体实现方式为:给定第一帧某跟踪目标的真值包围盒,该算法首先提取多个不重叠的局部图像块集合,并通过多任务联合学习的方式实现可见光和热红外两种模态下的目标特征的稀疏表示。然后,将两个模态的特征连接成一个特征向量用于表示目标包围盒的特征。其次,我们利用拉普拉斯约束将每一个图像块之间的相似性引入到已有模型中,进一步优化稀疏表示中的稀疏系数,构成拉普拉斯稀疏表示。与此同时,该算法结合两种模态之间的利弊优劣,引入新的模态权重计算方式,将更准确的模态权重引入到拉普拉斯稀疏表示模型中,实现多个模态数据之间的自适应融合。为验证所提出的模型有效性,本文采集了一个全新且涵盖多种挑战的可见光-热红外多模态目标跟踪数据集,并对现有公共数据集进一步扩展,最终在这两个数据集上运行大量对比实验进行分析,验证该模型相对于多种单模态目标跟踪算法和多模态目标跟踪算法的有效性。  (2)对视频中车辆目标属性,现有方法常将每个车辆属性作为一个单独任务进行研究,这类方法一方面忽略车辆多个属性之间的共同信息,另一方面会增加整个车辆属性识别系统的硬件配置要求。因此,为了克服上述问题,并实现对车辆属性的精细化识别分析,本文提出一种基于多任务卷积神经网络的车辆属性识别算法,同时实现车辆类型和车辆颜色的识别。该算法主要流程为:首先,根据车辆属性数目设计多任务卷积神经网络结构,并准备相应多属性车辆数据集;然后,利用此数据集训练多任务卷积神经网络模型;其次,根据该网络模型输出的车辆类型结果,设计相应的车辆掩膜,并将车辆掩膜加入到原图像中;然后,利用加入掩膜处理后的图像训练SVM分类器,并进行车辆颜色识别工作。最后,在由高速卡口相机抓拍的大规模高清车辆图像数据集上进行测试。同时,本文最后在所构建的卡口车辆图像数据集上对该算法的有效性,并对比加入车辆掩膜对车辆颜色识别的影响,验证其合理性。
其他文献
目前,随着通信技术的发展,各个领域都已经进入了一个相对高速的发展阶段,首当其冲的就是计算机行业。计算机在工业,民用,军用等领域都显示出他强大的能力,业务开发者对开发融
网络信息化时代,如何进行简单有效的身份识别与认证,保护信息安全,是急需解决的关键社会问题。利用人体固有的生理特征或行为特征进行个人身份鉴定的生物特征识别技术,因其安
随着电子信息化进程的加快和互联网的快速发展,图像资源正海量的增长。越来越多的文档以图像的形式进行存储。文档图像中除了纯文本文档图像和纯表格文档图像外还有很多在文
图像是人类获取外界信息的重要来源,图像处理技术与人类生产生活息息相关。但由于拍摄环境,拍摄设备以及传输条件的不同,一幅图像的质量会受到噪声和光照的影响,使图像质量降低,进
随着无线传输技术的发展以及移动电子产品的普及,家庭网络作为数字化的一个重要组成部分,其相关的技术和标准逐渐成为国内外开发人员关注与研究的热点。消费者希望在家中的任何
图像的三维重建技术作为计算机视觉的一个重要分支,已被广泛的应用于医学图像处理、航空航天、军事勘察以及虚拟实现等各个领域。虽然已有的三维建模工具在不断完善,但是想要构
线上社交网络方兴未艾,数据共享、隐私保护等问题日渐引起公众注意。访问控制是实现信息安全的重要技术之一,在线上社交网络环境中它主要通过防止合法用户对受保护的网络资源进
无线传感器网络(WSN)是一门综合了计算机技术、现代通信技术、微电子技术、嵌入式系统、分布式信息处理等技术理论的新兴科学。WSN数据融合可以给用户带来更加真实可靠的数据
近年来,知识库在信息检索、文本理解等方面显得越发至关重要,但是如何为任意领域构建一个大规模知识库仍是一件非常有挑战性的工作。幸运的是,已有大量的图书在数字图书馆中
图像在获取的过程中可能包含模糊区域,这些模糊对图像质量的影响很大,影响人们获取想要的信息,因此有效的检测出这些模糊区域就非常重要。本文的研究是图像局部模糊测量与分割,具