基于语义知识的零样本图像分类

来源 :北京信息科技大学 | 被引量 : 0次 | 上传用户:pppxulan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
零样本图像分类通过语义知识建立了已知类别到未知类别的纽带,从而能够识别训练阶段未见过的类别,目前已成为计算机视觉领域的研究热点之一。建立的纽带包括语义属性和语义词向量,语义属性是对图像的语义描述,语义词向量是类别标签对应的文本特征。现有的零样本图像分类算法研究了属性学习和从视觉到语义的映射函数学习。但是,现有的方法忽略了相似度计算的度量方法和语义知识的构建,本文针对其不足进行了改进,主要工作包括:(1)针对不同属性对分类决策具有相同权重的问题,提出熵值法属性权重学习的零样本图像分类算法。该方法利用全连接层构建视觉和语义的联合嵌入模型,然后引入熵值法学习属性的权重,进而得到属性加权的距离函数,并用于最近邻搜索。实验结果表明改进的方法提高了模型的准确率,同时证明了选择不同的嵌入空间也会影响识别精度。(2)针对单一辅助知识描述目标的局限性,提出了自适应加权融合特征的零样本图像分类算法。该方法利用神经网络融合文本特征和语义属性,再引入粒子群优化算法确定特征融合的权重,能够加强语义信息的丰富性,从而将加权融合的特征用于零样本图像分类。实验结果表明改进的方法提高了分类模型的识别精度和鲁棒性,同时增强了语义知识的健壮性。(3)针对相似度计算中固定度量函数的缺陷,提出了度量学习改进的语义自编码分类算法。该方法使用语义自编码构建视觉和语义的联合嵌入模型,再通过对原始数据的学习获得可调节参数的度量函数,然后采用得到的度量函数计算特征间的相似度。实验结果表明度量学习改善了特征的分布,使类内的特征分布更加的紧凑,从而降低了分类模型的错误率。针对度量方法和语义知识的不足,本文基于熵值法、粒子群优化算法和度量学习提出了改进的算法,这些方法提高了模型的准确率和鲁棒性,增强了语义信息的丰富性。
其他文献
本文描述了一种应用性强、档次高的自动检测教学实验装置 :数字式位移传感器实验教学系统的结构、功能和基本原理 ,说明了该实验教学系统的设计特点 ,体现了加强学生工程应用意识、着重培养学生工程实践能力的实践教学改革思想
随着多媒体技术的出现和广泛应用,借助多媒体实施教学已成为计算机辅助教学的发展方向之一。我院护理部于2000年开始将计算机辅助教学引入到临床护理教学中,首先,组织各科室教学
目的:探讨急性心肌梗死溶栓期的护理措施。方法:对急性心肌梗死患者溶栓期采取不同的护理措施,观察治疗效果。结果:通过加强溶栓期护理,并发症减少,病死率降低。结论:加强溶栓期
以单模石英光纤为材料,首先用管腐蚀的方法制备出光纤探针,然后在管表面镀一层银膜,构成具有表面增强特性的管状光纤探针。将光纤探针应用到拉曼光谱仪上,实际测量了几个具有代表性样品的拉曼光谱,实验表明效果较好。
简要介绍了如何将单片机和CPLD结合用于实验教学系统中,阐明了硬件设计、软件设计的总体思想.
随着快递物流等行业迅猛发展,中国的高速公路建设水平不断提升,建设规模也不断扩大,在高速公路四通八达,日趋完善的同时,高速公路上发生交通事故的数量也在不断攀升。其中大约四分之一的交通事故是由于大风、下雨、积雪、结冰等恶劣天气所引发的,尽快建立以用于复杂路况的结冰传感器为核心的道路气象信息预警系统显得尤为重要。通过对国内外道路结检测领域的调研,发现一些发达国家已经建立了比较完善的道路气象监测预警信息系
本文在论述多媒体课件设计原则的基础上,提出了基于WWW下的现代远程教育的三层客户机、服务器体系结构和系统模型,给出了课件模块的详细逻辑结构.
以红曲霉ZL307为出发菌株,利用氦-氖(He-Ne)激光对其单孢子悬液进行诱变育种.通过计算存活率和正突变率,确定激光诱变育种的处理条件为电流强度20mA,照射时间50min.通过平板初筛和摇
习主席三月十八日在京主持召开的思政课教师座谈会上指出:“加快推进教育现代化、建设教育强国、办好人民满意的教育,努力培养担当民族复兴大任的时代新人,培养德智体美劳全面发
报纸
根据梁北矿二1煤的特点,确定防突措施方案。在突出煤层的软分层中施工卸压排放钻孔(密集钻孔)形成卸压槽,使采掘作业控制范围内应消突的突出煤体的突出危险性降低或消失。通过在