基于度量学习的紧凑型视频指纹算法研究

来源 :河南理工大学 | 被引量 : 0次 | 上传用户:junbobo126
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频指纹作为多媒体信息安全领域中的一项重要研究课题,在视频版权保护、视频认证以及近似视频推荐等方面得到了广泛应用。鲁棒性、独特性和紧凑性是衡量视频指纹性能的三个基本指标,三者之间相互影响。为了兼顾三者性能的提升以及增强算法的编码效率,本文以深度学习理论为基础,采用深度度量学习的方法,在深度神经网络的搭建方案和目标函数的设计策略两个方面展开研究,不断完善视频指纹算法的性能,具体研究成果如下:1.在满足鲁棒性、独特性前提下,为提高视频指纹系统的紧凑性,提出一种端到端的深度度量学习视频指纹算法。算法整体框架由权值共享的三分支网络组成,分支网络采用改进的3D残差网络将多层特征进行融合并压缩,实现了由视频数据到指纹的端到端映射。网络目标函数由度量和分类双损失函数组成,其中,设计的边界约束三元组角度度量损失函数,克服了普通三元组损失函数对特征相关性表达不足的问题,增强了指纹的鲁棒性;分类损失函数弥补了度量损失对样本特征整体分布不敏感的问题,提升了指纹的独特性。在公开数据集上实验结果表明,该算法仅用32bit的指纹就取得了优于对比算法的性能;增强指纹紧凑性的同时其鲁棒性与独特性也得到了相应的提升。2.在保证视频指纹三者性能提升的基础上,为进一步提高算法的编码效率,提出一种端到端的混合卷积胶囊网络视频指纹算法。该算法以权值共享的三分支网络作为整体框架,每个分支网络采用轻量级的3D/2D混合卷积模块提取浅层视频特征并作为后续胶囊层的输入,将视频数据直接映射为紧凑的实值向量。在目标函数方面,提出一种自适应间隔的三元组损失函数,采用自适应的方式调节三元组损失的间隔值,以减少网络的训练难度,提高算法的性能。在公开数据集上实验结果表明,在输出32bit视频指纹的情况下,该算法相较于对比算法的性能有了进一步提升。3.为充分利用视频的时空信息,提高算法的整体性能;并保证量化编码后视频指纹的质量,提出一种端到端的时空胶囊网络视频指纹算法。该算法将设计的时空胶囊网络嵌入到权值共享的双胞胎网络结构中,以滑动窗合成相邻帧的方式作为网络输入,提取多个关键帧的映射特征并融合,从而构造32bit的视频指纹,增强指纹的稳健性以及算法的泛化能力。在目标函数方面,将对比损失函数与量化损失函数相结合,实现了由特征提取到量化编码的整体优化过程,促进了指纹编码质量的提升。在公开数据集上实验结果表明,该算法在少样本训练下仍具备较强的鲁棒性与独特性,其整体性能优于对比算法。本文以深度学习理论为基础,提出的三种视频指纹算法在整体性能方面相较于对比算法都具有显著提升,其编码效率以及少样本学习能力也得到了相应的增强,在多媒体信息安全等相关领域具备重要的研究价值。论文有图30幅,表15个,参考文献72篇。
其他文献
集装箱运输体系已成为现代物流中极其重要的一部分。集装箱门式起重机作为装卸、搬运、堆垛集装箱的专用工具被广泛使用于各港口码头、铁路集装箱货场和集装箱集散地。集装箱门式起重机一旦发生事故将对相关人员生命安全造成极大威胁。因而在设计阶段需要对其进行详细的校核和力学分析工作。金属结构作为起重机的骨架,起支撑各功能部件的作用,是整台起重机的重点研究对象。本文以门式起重机的金属结构为主要对象,通过传统计算法与
学位
随着工业生产的发展与人类对生活品质的不断追求,越来越多的电气设备与电子产品涌入到人们的日常生活中。传统的电能传输方式在其传输过程中存在高压漏电、线路绝缘老化、过电压电火花等问题。为了解决这些问题,无线电能传输技术(Wireless Power Transfer,WPT)应运而生。近年来,WPT技术发展迅速,由于电场耦合式的WPT技术(Electrical-field Coupled Power T
学位
动力电池作为新能源汽车的动力核心,其不一致性严重制约着新能源汽车的性能。本文以改善动力电池的不一致性为目标,针对动力电池的均衡方法展开研究,通过分析研究目前的均衡拓扑及控制方法,设计出基于LC储能的均衡拓扑及其控制策略,通过实验验证了其可靠性。为克服单体的不一致性问题,以三元锂电池为均衡对象,分析现有均衡技术的优缺点,设计一种基于LC储能的串联电池组均衡拓扑,对其进行原理分析。在此基础上设计出基于
学位
目前模块化多电平换流器在柔性直流输电领域具有巨大的优势,自其问世以来得到了国内外广泛应用。作为一种新兴的多电平拓扑,其技术还需要进一步发展,因此有必要对其相关技术难点继续深入研究。本文以电网不平衡情况下模块化多电平换流器环流抑制为重点研究对象,首先对MMC拓扑结构和基本工作原理进行分析,通过MMC端口电压特性和基尔霍夫定律搭建MMC数学模型和环流模型,阐述了载波移相PWM调制和最近电平调制策略并结
学位
<正>在联合国教科文组织公布的《人类口头与非物质文化遗产代表作名录》中,可以看到昆曲、古琴、书法、篆刻、皮影、木结构建筑营造技艺等多种中国文化艺术瑰宝的身影。这些充满魅力的艺术形式,在山西这片古老而丰饶的文化土地上都有着不同程度的呈现。
期刊
逆变器作为连接新能源微电网系统与本地负荷以及大电网的核心器件,其逆变器控制技术的研究尤为重要。其中,虚拟同步发电机(Virtual Synchronous Generator,VSG)控制技术是目前研究的一个热点。在实际应用中,为了满足电力系统大容量的需求,多VSG并联运行成为目前发展的趋势。本文主要针对多VSG在孤岛模式下并联运行时出现的系统环流、电压降落以及无功分配等问题进行研究,并针对上述问
学位
永磁同步电机(PMSM)相比于其他传统的非永磁类电机,具有很多优点,例如不需要励磁装置、更高的效率、更高的功率因数等。正因为PMSM的这些突出的优点,使得其广泛应用于各行各业以及各种工作场合。然而,PMSM中永磁体却极易发生故障,通常在PMSM故障中,失磁故障占比高达70%以上,因此,对于PMSM失磁故障分析显得尤其重要。本文以一台小型表贴式PMSM为主要研究对象,从电磁场分析和温度场分析两个角度
学位
近几年,中国生产制造行业的发展突飞猛进,双梁桥式起重机在经济中的重要性也更加突出。为了满足生产现场的使用要求和安全规范,很多桥式起重机的主梁结构设计得过于保守,导致起重机的质量和运营成本增加,材料浪费严重。因此降低起重机的自重,对其关键的主梁进行轻量化设计成为了起重机设计者和使用者特别关注的问题。本课题针对某公司原料厂对其20t-27m双梁桥式起重机的使用需求,在研究分析了双梁桥式起重机的主梁结构
学位
变压器是电力系统的核心设备之一,变压器的正常运行与电力系统运行的安全性和平稳性密不可分。随着我国电网规模的不断扩大,对电力系统安全平稳运行的需求也在不断提升,因此对变压器运行状态进行监测,开展变压器的相关故障诊断研究,对于提高整个电力系统的安全性和稳定性都具有重要意义。针对变压器故障类型与故障征兆之间复杂的映射关系,为了能够准确的实现变压器故障诊断,提出了一种基于改进蝗虫算法优化贝叶斯网络的变压器
学位
雾天条件下,空气中悬浮着的大量微小颗粒对光线进行吸收和散射,导致图像采集设备获取到的户外图像质量严重退化,出现细节模糊,对比度、清晰度降低,整体颜色偏白等问题。不仅影响了人类对图像内容的辨识,也给以图像或视频为主要处理对象的计算机视觉任务带来了严重干扰,因此,图像去雾有十分重要的研究意义和应用价值。近年来,图像去雾算法引起了国内外学者的广泛关注并取得重大进展,主要可被划分为三大类:基于图像增强的去
学位