基于胶囊网络的动态路由的研究与应用

来源 :青岛大学 | 被引量 : 0次 | 上传用户:cxg2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
胶囊网络将图像的实体和空间信息编码成胶囊,通过动态路由筛选出低级胶囊中的关键信息并映射成高级胶囊。动态路由迭代更新的方式能够充分利用图像的特征信息,但也存在局限性。一方面,高低胶囊层间的全连接结构不能高效区分不同特征的贡献度大小,而且需要人为指定的迭代次数也使模型更易受到冗余特征的干扰;另一方面,独立于反向传播的动态路由仅靠耦合系数筛选特征,由此会抑制同一关键特征对多个高级胶囊的支持,造成关键特征的丢失。此外,单个卷积层的特征提取不仅不充分,还使得胶囊中含有更多的冗余特征,进而影响模型的收敛速度和分类精度。针对上述问题,本文依次提出两个模型探究胶囊网络在理论和应用方面的良好性能。针对胶囊网络在处理复杂图像时不能有效提取关键信息、分类准确率低的问题,本文提出了基于点乘注意力的胶囊图网络模型。为有效提取图像中的关键信息,在特征提取模块增加通道注意力,在抑制噪声负面影响的同时为有效特征赋予大的权重,优化胶囊质量。为获取同层胶囊之间的依赖关系,在获得的高质量初级胶囊间使用点乘注意力构建胶囊图结构,利用拉普拉斯特征映射得到高级胶囊,以此提升模型在同层胶囊中的特征选择能力。同层的胶囊图路由算法通过反向传播进行训练,弥补了动态路由需在胶囊层间独立更新的缺陷。此外,为保持高级胶囊在激活后的长度优势,适当调整原始激活函数中的超参数。实验结果表明,基于点乘注意力的胶囊图网络模型在控制参数量的前提下,实现了在CIFAR10等基准数据集上的更佳性能。针对脑梗MRI样本量小、图像结构复杂,胶囊网络在其上的分类准确率还有待提升的问题,在胶囊图网络模型的基础上提出了一种基于残差结构的复合路由胶囊网络模型。添加恒等映射的残差结构不仅提取了复杂抽象的高级特征,同时也将重要的低级特征融合到向量胶囊中,提升了胶囊对空间和通道方面的特征表达能力。改进后的特征提取模块不仅优化了胶囊的质量,而且也实现了模型的稀疏性表达。为进一步提升模型的性能,在同层胶囊图路由后加入不同层胶囊间的特征匹配度。多层次的路由过程充分捕获了图像多个角度的有效特征。基于残差结构的复合路由胶囊网络不仅在基准数据集上取得了超越其他胶囊网络变体的效果,而且在脑梗MRI图像分类中取得了98.75%的分类准确率,验证了所提模型的有效性和泛化性。
其他文献
<正>为了满足职工多样化、个性化需求,打造具有特色的工会志愿服务品牌,2020年底,海曙区总工会志愿服务大队成立。志愿服务大队通过志愿服务关爱和帮助身边的困难职工群体,想职工所想,急职工所急,解职工所需,助力工会打通服务职工的"最后一公里"。
期刊
深海垃圾是指那些存留在海洋深处或者海底难以降解的废物垃圾。深海垃圾会对海底生物生存造成直接或间接性的威胁。深海垃圾在深海或海底存留时间长,清理难度大,严重污染了海洋环境。目前清理深海垃圾主要方式是通过人工操作水下潜水器机械臂来完成,效率不高。将深海垃圾分类和检测系统装载入自主水下潜水器(Autonomous Underwater Vehicle,AUV)以实现自主清理可以显著提高垃圾清理效率。但关
学位
<正>能源是国家经济发展的重要物质基础,交通是国家经济发展的互融互通命脉,交通发展离不开能源供给。自我国提出“双碳”目标以来,交通行业低碳发展进程迅速、需求旺盛。立足推动能源行业高质量发展,服务国家经济社会发展全局,全面推进交通行业清洁能源的高效利用,
期刊
着色旅行商问题是组合优化的一个研究领域。它是多旅行商问题与旅行商问题的一种泛化,可应用在含重复区域的多机器工程系统中的规划问题。CTSP是NP完全问题,目前一些算法已经被用于求解该问题,如遗传算法、蚁群算法等,但一方面传统的智能算法求解该问题时容易陷入局部最优解,在速度和求解质量仍有提升空间;另一方面在智能交通系统和多任务协作等领域,许多问题都可以用CTSP建模,所建模型的规模很容易趋于数百维以上
学位
随着现代教育技术和教育信息化的发展,科普动画片融入基础教育的科学教育越来越引起大家重视。科学教育中的基础概念知识的理解无疑对小学生建构科学知识框架体系具有基础性作用。那么如何利用科普动画片促进小学生基础概念性知识的理解就是一个重要教学研究课题。因此,本研究着眼于探讨科普动画片对小学生概念性知识理解的作用,以及科普动画片教学与传统教学的互补性,试图提出在实际科学教学中融入科普动画片的教学建议。本研究
学位
实际场景中在拍摄图像时,由于物体的运动和相机抖动等原因,所捕获的图像包含不利于获取信息的模糊情况。图像去模糊的目的,即将模糊的图像通过技术手段恢复清晰,这是计算机视觉底层任务中的热点研究方向。现有的图像去模糊技术已经很好地解决图像模糊问题,但在图像的特征信息提取、处理模糊图像的响应速度、图像局部纹理信息的处理、模糊图像数据集的制作等问题上,还存在一定的不足。近年来,深度学习发展迅速,基于卷积神经网
学位
微生物组与其周围的环境形成各种各样的复合生态体系,具有复杂的相互关系。人体微生物组与人类共同进化,被称为人的“第二基因组”。得益于高通量测序技术的快速发展,海量的微生物组数据已经生成。而如何快速、高效地处理这些测序数据,精准地解码微生物组结构和功能与其周围环境的互作关系,从而进一步发掘隐藏在海量数据下的生物学意义变得至关重要。高通量测序序列处理和多样性分析是微生物组研究的基础。然而现在数据预处理和
学位
我国学界目前对刑事诉讼中的报复性抗诉现象尚无系统研究,仅在大量的实证研究中出现了检察机关报复性抗诉的影子。本文从实证研究到制度分析再到国内外理论研究,论述报复性抗诉的概念、判断标准,形成原因及防控对策。第一部分阐述了报复性抗诉的概念。本部分对报复性抗诉的特征进行归纳,刑事二审报复性抗诉因其复杂、隐蔽等特点成为本文论述核心,并介绍了刑事二审报复性抗诉的类型以及简述了相关的域外视野。第二部分论述了刑事
学位
随着社交网络的快速发展,用户可以更加便捷地通过移动设备上的位置定位服务实时分享访问的地点。由此产生的海量签到数据中潜藏着用户的移动规律和行为信息,如何从这些数据中有效地提取信息已经成为当前研究的热点。在各类信息提取的研究中,兴趣点推荐任务作为一项根据签到数据分析用户潜在移动规律进而预测用户未来访问行为的研究,其在商业上的巨大应用前景引起了工业界和学术界的广泛关注。然而,数据的高度稀疏性严重限制了兴
学位
本文由绪论、正文三章和结论、参考文献等内容组成。绪论中,交代了选题原因、研究概况、研究意义、研究方法等事项。第一章,介绍了扎拉森的人生轨迹、从艺道路以及史诗创作的特色和风格。以童年、青年、老年三个阶段来论述扎拉森的人生轨迹;从学习胡仁乌力格尔的经历和演唱胡仁乌力格尔的经历两个方面来论述扎拉森的从艺道路。同时,对其所演唱的史诗、胡仁乌力格尔的艺术特色和风格进行了探讨。第二章,对史诗《宝迪嘎拉巴汗》文
学位