【摘 要】
:
因图像数据具有大量的空间冗余信息,传统的多分辨率网络在处理图像数据时会产生较高的计算成本。而自蒸馏学习方法能够在精度与计算成本之间实现动态平衡,使模型在不增加网络深度和宽度的基础上,有效地提高模型精度。提出一种多分辨率自蒸馏网络(MRSDN),用于解决小样本学习中输入样本的空间冗余问题。从原始网络中分出一个浅层子网络以识别图像的低分辨率表示,并且保持该原始网络识别高分辨率图像特征的能力。同时,在多
【基金项目】
:
国家自然科学基金(61876217,61876121,62176175); 江苏省“六大人才高峰”高层次人才项目(XYDXX-086); 苏州市科技计划项目(SGC2021078);
论文部分内容阅读
因图像数据具有大量的空间冗余信息,传统的多分辨率网络在处理图像数据时会产生较高的计算成本。而自蒸馏学习方法能够在精度与计算成本之间实现动态平衡,使模型在不增加网络深度和宽度的基础上,有效地提高模型精度。提出一种多分辨率自蒸馏网络(MRSDN),用于解决小样本学习中输入样本的空间冗余问题。从原始网络中分出一个浅层子网络以识别图像的低分辨率表示,并且保持该原始网络识别高分辨率图像特征的能力。同时,在多分辨率网络中引入改进的全局注意力机制,以减少信息损失且放大全局交互表示。利用自蒸馏学习方法将网络中更深层的知识压缩到浅层子网络中,以提升浅层子网络的泛化能力。在此基础上,将低分辨率网络中的粗粒度特征融合到高分辨率网络中,从而提高模型提取图像特征的能力。实验结果表明,在Mini-ImageNet数据集上MRSDN网络对5-way 1-shot与5-way 5-shot任务的准确率分别为56.34%和74.35%,在Tiered-ImageNet数据集上对5-way 1-shot与5-way 5-shot任务的准确率分别为59.56%和78.96%,能有效缓解高分辨率图像输入时的空间冗余问题,提高小样本图像分类的准确率。
其他文献
影视产业有着技术因素强、传统自然资源耗费较少、对生态保护有积极影响、与旅游产业等关联产业相互促进作用强、前景看好等属性,从而变成了一个具有领先地位的产业。在有利于产业扩张的政策背景下、扩大的产业方面投资和消费升级等的助推中,我国电影电视剧文化娱乐产业走进了高速发展阶段。随着后疫情时代的来临,多种多样居家形态的娱乐方式进一步占据消费者文化娱乐方面的消费占比,因此消费者对网络剧这一种能够轻松获取的居家
基因治疗为人类疾病治疗开辟了一条新的途径,如何选择高效、低毒、靶向性强的载体,以协助目的基因进入靶细胞并正确表达,是基因治疗过程中必须解决的问题,也是基因治疗研究领域的核心技术之一。腺相关病毒以其独有的优势在近年的研究中得到了长足发展。现对腺相关病毒介导的基因治疗在临床中的应用做一综述。
以网络文本分析、情感倾向分析、IPA模型相结合,研究昆明西山森林公园的公众满意度感知评价。通过网络爬虫获取携程、大众点评、美团3大旅游网站的昆明市西山森林公园评论文本。利用ROST CM6软件进行高频词分析,再结合相关文献与文本分析,对评论文本进行手动感知维度分类;Python编写代码调用百度智能云API的方式对感知维度分类数据进行情感倾向分析;以感知维度的频数和积极情感概率值为基础,构建IPA分
用表面带负电荷的还原氧化石墨烯(RGO)作为阴离子聚合引发剂,在RGO表面使N-乙烯基咔唑(NVK)原位聚合,生成可溶性聚乙烯基咔唑(PVK)共价功能化的RGO非线性光学材料(RGO-PVK)。采用红外光谱、X光电子能谱和紫外-可见吸收光谱等对RGO-PVK进行了表征。将RGO-PVK嵌埋在非光学活性的聚甲基丙烯酸甲酯(PMMA)中制备了具有良好光学性能的RGO-PVK/PMMA薄膜,并利用开孔Z
艺术教育是高校实施人文素质教育和美育的重要手段。当前高校艺术教育的发展存在诸多方面的制约因素,艺术教育的普及工作势在必行。北京科技大学积极尝试探索新型的艺术教育模式,以主题团日为载体,建立了系统化的活动体系,形成了课程化的教育模式和合理化的评价机制,使艺术教育实现了对学生的全覆盖,推动了艺术教育的普及。
政府投资项目覆盖生态环保、基础设施建设、脱贫攻坚、“三农”建设、社会民生等经济社会高质量发展的关键领域和薄弱环节,是城市建设的有力支撑,是固定资产投资的有力保障,抓好政府投资项目实施事关政府资金流向、事关城市建设、事关民生福祉、事关人民获得感。从国家、自治区到市县都高度重视政府投资项目实施管理,相继出台相关制度细化政府投资流程和审批手续,坚持将权力关进制度的笼子,进一步优化政府投资项目实施的全流程
近年来,居民改善生活的愿望日益强烈。在此背景下,家装及家居行业快速发展,并逐渐成为一个规模超四万亿的庞大市场。而在这其中,高质量的客户服务对维持公司竞争力和良好客户关系具有至关重要的作用,尤其在当今激烈的市场竞争中,组织公司须尽量满足每一位客户的需求。故本文针对以家装为核心业务的X装饰工程公司的客户关系管理(英文全称为Consumer Relationship Management,简称CRM)进
针对深度神经网络在图像识别中存在的训练数据不足,以及多模型蒸馏中存在的细节特征丢失和蒸馏计算量大的问题,提出一种小样本问题下培训弱教师网络的模型蒸馏模型。首先通过集成学习算法中的引导聚集(Bagging)算法培训弱教师网络集,在保留图像数据集细节特征的同时进行并行计算以提升网络生成效率;然后融合知识合并算法,并基于弱教师网络特征图形成单个高质量、高复杂度的教师网络,从而获得细节重点更突出的图像特征
进入21世纪以来,气候变化小说迅速兴起,成为国际文学批评界的一大前沿话题。本文聚焦尺度效应、非人类能动性研究、人与自然的网状纠连三大核心维度,考察气候变化小说研究,对其中的生态批评范式、叙事学视角以及气候变化批评等主流研究方法做出评述。在此基础上,将就气候变化小说研究的未来方向与发展态势提出若干建议。
受"身体转向"与"物质转向"文化思潮的影响,本文从物质生态批评的视角探讨劳伦斯小说中的身体书写。劳伦斯在小说中塑造了诸多身体残缺的人物形象,体现了身体作为一种物质的脆弱性特点,同时也隐喻了战争、机械文明和理性对人的异化。书写身体之美,讴歌生命之力是劳伦斯小说的重要主题,本文拟从身体美学化与身体物质化的交叠性视角阐释小说人物身体所蕴含的物质力。把身体作为一种物质去研究,不仅可以从新的研究范式解读经典