基于卷积神经网络的细粒度图像分类方法研究

来源 :江南大学 | 被引量 : 0次 | 上传用户:Blue0220
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对细粒度图像由于类间差距过小、类内差距过大、背景复杂以及姿态差异等问题目造成的分类瓶颈,本文设计了一系列基于卷积神经网络的端对端的弱监督学习分类模型,实现对细粒度图像分类精度的提高。本文主要研究焦点在于如何准确提取识别细粒度图像易混淆、难分类的特征,有效降低分类误差。具体的研究内容如下:1.基于自注意尺度变换网络的细粒度图像分类方法。为了提高网络提取特征的表现力,本章提出自注意力融合模块和多尺寸变换来改善特征提取能力。注意力融合模块中,我们在ResNet50提取的基础特征上分别压缩了空间和通道两个维度上的信息,来辨别各个部位的关键特征,目的是增强目标的局部特征以获得强调细节特征的注意力图。在多尺寸变换模块中,目标尺寸图像和部位尺寸图像的产生把细粒度图像中目标的语义特征和细节信息结合起来,解决由于细粒度图像类间差异小而导致的分类问题。2.基于多分支增强的细粒度图像分类方法。本章提出以弱监督学习的方式采用Inception-V3网络提取图像基础特征,从中获取多个局部响应区域并进行特征融合,在此基础上采用注意力机制对图像关键区域进行自约束的局部裁剪和局部擦除,避免仅提取目标单个部位的特征,促使网络更加关注目标物体不同部位的细节特征,同时也提升了目标区域定位精度。此外,本章提出中心正则化损失函数来约束训练过程中获取的注意力区域,进一步提升目标定位精度和扩大图像特征的类间差距。3.基于多级注意力融合卷积网络的细粒度图像分类。由于细粒度图像内容存在类内差距超过类间差距的问题发生,在本章中,我们的研究聚焦于在弱监督学习中挖掘细粒度图像中的判别性局部特征,实现精准的目标分类。在上节的工作基础上,本文提出一种互补性数据增强的多级注意力融合卷积网络模型,多级注意力融合框架包括基于Inception-V3的注意力融合模块和自适应双线性特征融合结构两个部分,同时通过注意力裁剪和注意力擦除进行互补性数据增强,摒除了无关的背景信息,以及附加局部特征损失进一步提升了整个网络的目标物体定位与分类性能。综上所述,本文的方法以注意力机制为导向,使用特征融合和数据增强方法识别细粒度图像的语义特征,并通过附加损失函数的反馈校正网络关注的注意力区域,有效提高了细粒度图像分类准确度。在三个公开数据集上的实验表明,本文取得了比当前最优方法更好的结果。
其他文献
二十一世纪信息化已成为全球经济发展的时代特征,互联网时代下网民平均年龄日益年轻化,为了更好地适配不同年龄段的用户群体,未来会呈现越来越多面向低龄群体的互联网产品。作为网络原住民,儿童有很大的信息搜索需求,社会也对儿童信息素养教育提出了较高的要求。搜索引擎作为网民信息搜索中最常用和简单快捷的工具,使用率很高,但通用搜索引擎上信息纷繁复杂。儿童不方便操作,信息安全等系列问题受到家长们的普遍关注。本文通
刑法中的医疗过失行为根据不同的主体身份、执业场所、行为反复性等因素可能构成医疗事故罪、非法行医罪、过失致人死亡罪等不同罪名。众罪名中“医疗事故罪”最为典型,因为它既满足身份犯的标准,又完全属于过失犯罪,而且涵摄范围较规制特定医疗行为的罪名更宽泛。所以,研究我国刑法中医疗过失行为的刑事责任问题主要从“医疗事故罪”出发,由点及面进行归纳延伸。医疗过失行为涉及多项过失犯罪前沿理论的应用。新过失论便于保护
爱尔兰动画导演汤姆·摩尔凭借其独特的美术风格与作品中所呈现的爱尔兰民族文化为世界所熟知。2009年至今,他创作了《凯尔经的秘密》、《海洋之歌》、《狼行者》等与爱尔兰民间神话传说有关的经典动画作品。他创造的故事充满着童真童趣与幻想色彩,动画作品不仅呈现出独特的视觉盛宴,还为故事增添了与之契合的儿童角色视角。作品对儿童角色的塑造,构建了观者进入爱尔兰传说故事的“眼”,为不同的角色赋予独属爱尔兰文化的印
柯尔克孜族刺绣纹样是中国传统纹样的重要组成部分,它有着深厚的历史渊源,积淀了柯尔克孜族人民自古以来的文化内涵与审美取向,这些纹样以别致的构成、绚丽的色彩、多样的工艺向人们展现了一个古老游牧民族的民俗风情、文化观念和宗教信仰,它们生命力持久,延传至今,值得更多的人去了解发掘。但随着现代文明的发展,柯尔克孜族刺绣纹样的传承也面临着新的挑战,如何将这些纹样提炼并运用于多元的设计中是设计师及艺术文化研究者
在新零售背景下的互联网体验经济时代,契合消费者所需的高效、优质体验不仅能够刺激消费者消费欲望,而且能够促使企业由“产品为导向”逐渐向“以消费者为导向”予以转变。而在5G技术的助力下,新发展起来的增强现实技术的应用为包装设计创新提供了契机,为提升包装的用户体验提供了新的思路。AR技术从根本上改变用户与包装之间的互动关系,使包装设计为产品增色,促进消费体验升级。目前,国内外关于AR交互式包装设计的理论
作为一位深谙并秉承现实主义创作精神的当代作家,弋舟以独特的文学气质和鲜明的创作风格受到了文学界的广泛关注,荣获了鲁迅文学奖等诸多奖项,体现了一定的文坛影响力。日常生活作为生命生存的意义支撑,一直是弋舟文学创作的出发点。弋舟的小说聚焦日常生活场景,探索人性的深度与广度,体察日常生活包裹下的社会变革,呈现出现代人的生存样态和心灵面貌。论文以“日常生活”为研究切入点,对弋舟小说进行文本细读,挖掘弋舟对“
4G和5G网络的到来,促成手机成为智能化服务的终端,满足人们日常生活需要,人们通过手机更好地适应着信息化社会。但手机沉迷带来的心理、生理问题也不容忽视。根据媒介系统依赖理论和负强化情绪加工理论,某种行为或物质在满足人们需求、缓解负性情绪的同时,人们也容易加强此种行为或依赖这种物质。例如,当人们从事某项工作时,往往受手机相关线索的影响,产生强烈的使用渴求,习惯性地打开手机查看相关软件信息,以弥补错失
计算机视觉作为人工智能研究中的一个重要的分支领域,其重要性不言自明,基于人类对自身相关研究的重视,视觉任务中关于人的图像的研究无疑是举足轻重的。人脸识别作为视觉任务研究中最早的子课题之一,其研究成果已经达到了很高的水平,但是它在现实的应用中往往存在很大的局限,仅仅靠人脸来识别一个完整的人并不现实,其中存在着许多难点(如拍摄的人脸图像模糊,人脸存在大范围遮挡等)。在这样的情况下,行人重识别作为一项重
目标跟踪的主要任务在于从存在噪声的观测数据中过滤出真实目标的状态并输出,在基于分布式传感器网络的多目标跟踪任务中,存在诸如目标新生、目标数目变化、目标运动呈现出非线性/非高斯特征、不同传感器观测误差差异大,且未知以及传感器具有受限观测视野等问题,使得完成稳定的多目标跟踪任务十分具有挑战。基于随机有限集的多伯努利族滤波器,如势均衡多伯努利滤波器(CBMe MBer),广义标签多伯努利滤波器(GLMB
随着互联网时代的来临,每一刻都会产生海量数据,其中文本数据以传输效率高、便捷性高、普及范围广的优势存在于各个领域中,而如何对文本数据进行快速、准确的分类是当下的热门问题。本文以新闻文本为研究对象,对相关分类算法进行研究并改进,最终验证所提出的算法能够提高文本分类准确度。1.针对传统朴素贝叶斯文本分类算法中文本特征缺乏特征权重的问题,引入更侧重特征类别间分布的互信息,并将TF-IDF与互信息相结合,