基于语义与神经路径编码的卷积神经网络可解释方法研究

来源 :重庆邮电大学 | 被引量 : 0次 | 上传用户:a9s5c112j6b
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大数据和人工智能技术的飞速发展,深度卷积神经网络(Convolution Neural Network,CNN)被广泛的应用于多种任务场景,并取得不错的效果。然而对于多数应用场景来说,深度学习模型仍然是不可解释的黑盒子,其主要由两个问题导致:(1)深度神经网络做出的决策不可评估;(2)深度神经网络学习的知识对人类不可知。在脑科学领域的神经编码理论中,特定的神经元能对同一类的刺激产生反应,并且刺激信息会随着神经路径(神经回路)进行传递,直至决策中枢。与大脑类似,人工神经网络中信息也是随着神经元逐层传递至决策层。因此,本文将结合神经编码理论,对卷积神经网络在图像识别任务中可解释性进行探究。本文主要工作如下:(1)针对深度神经网络做出的决策不可评估问题,提出了结合类相关神经路径的神经网络决策置信度评估方法。首先,分类统计不同类别的样本在神经网络中各神经元的激活值;其次,根据神经网络各层神经元的激活值分布情况,梳理得出特定类别独有的神经路径;然后,通过对比各类别神经路径间的相似度,发现导致神经网络误分类的原因;最后,通过对神经网络目标函数中添加惩戒项,实现控制特定类别神经路径的形成,用以评估神经网络决策的置信度。实验结果表明:利用样本在神经路径中的激活情况,可以有效评估神经网络对于该样本决策的置信度。(2)针对深度神经网络学习的知识不可知问题,提出在卷积神经网络中嵌入可解释语义卷积算子的方法。首先,定义了提取线段、浮雕、边缘和轮廓等特征的可解释卷积算子;其次,使用随机替换的方法,将原始卷积神经网络模型中的卷积算子换为可解释算子;最后,结合可视化的方法,将这些卷积算子提取的特征图展示出来,获得神经网络学习的知识。本文将该方法应用于图像分类任务中的ResNet和DenseNet模型,并在CIFAR-10数据集上进行评测,实验结果表明:嵌入卷积神经网络的算子能够学习出人类能够理解的知识,而且这些知识对卷积神经网络的性能影响较大。
其他文献
四边形网格是三维模型数字化表示的重要形式,因其天然具有张量积性质、能够直观地捕获模型的几何特征和语义信息等优良特性,而被广泛应用于多边形建模、高阶曲面造型、纹理映射、有限元建模、压缩等方面。因此,高效率、高质量、自动化地生成四边形网格算法已成为国内外研究内容的热点。基于方向场参数化,从输入的三角形网格中获得特征对齐的四边形网格是目前最有效也是最流行的方法。但是当输入带有小尺度拓扑特征的大型网格模型
学位
自然语言文本作为互联网中不可或缺的信息载体,近年来其体量呈现爆炸性增长,进而兴起了许多协助用户快速获取信息的技术。其中,事件抽取作为信息抽取的关键子任务,可以为下游的自然语言理解和生成任务提供细粒度的事实数据。同时在基于神经网络的研究方法中,兼顾全局和局部的特征表示法已经被证实是有效的特征提取方法。基于此,本文在篇章级事件论元抽取上的主要研究内容如下:首先,研究了词跨度的实体语义增强嵌入。由于事件
学位
期刊
就酒类专用炭的应用剂量、处理时间进行了试验,以2‰的用量,处理16小时为佳,并具澄清、除苦、去杂味之功能。(陆月霜)
期刊
随着软件定义网络(Software Defined Network,SDN)和网络功能虚拟化(Network Functions Virtualization,NFV)技术在卫星网络架构里的应用,使得卫星网络的资源配置与管理变得更加灵活。然而,传统的资源租赁模式依赖于一个可信的第三方,导致了权利集中化,从而出现了资源信息不对等、资源管理过程不透明、交易结果易被篡改等问题。另一方面,频繁的资源交易与
学位
区块链是一种分布式账本技术,因其去中心化、可追溯以及防篡改等特性近些年得到广泛关注。随着其应用场景从虚拟货币逐渐进入到医疗、金融、农业等众多行业,区块链技术在连通性上的弊端也开始呈现出来,其封闭性阻碍了不同区块链间的信息传递和价值流通。因此跨链技术出现并成为了区块链技术的一个重要研究方向。本文基于匹配算法和中继链技术,研究并实现了一种区块链间的跨链机制,主要的研究内容如下:首先,针对现有跨链交易匹
学位
心电信号在心脏的健康状况监测和疾病诊断领域发挥着重要作用。在心电信号处理领域,R峰检测的准确率非常关键,因为可以通过它直接监测心率并且它是许多心电分析方法的预处理步骤。本文主要研究了两种类型的心电信号R峰检测:(1)基于频谱注意力核独立成分分析和自校准胎儿R峰检测器的无创胎儿心电R峰检测方法;(2)基于多尺度主成分分析网络的心律失常心电R峰检测方法。胎儿R峰检测在妊娠期心脏缺陷的诊断中意义重大,因
学位
随着自动驾驶应用逐渐步入市场,与自动驾驶相关的技术研究变得热门,比如车载云计算。车载云计算(vehicular cloud computing,VCC)利用自动驾驶车辆组建的临时资源池,即“车载云(Vehicular Cloud,VC)”,将空闲的车辆资源重新整合再分配。提供自动驾驶所需的所有服务。但VC的自组织性和动态性使VCC在管理和跨云访问方面具有很大的挑战。目前,相关VCC的研究大部分仅讨
学位
报纸
本文介绍一种金属结构的实时在线监测系统,在合适位置布置传感器监测金属结构设备运行过程的实时状态,再通过大数据分析比对,从而及时发现问题,排除隐患。通过工程应用案例,详细叙述系统各种传感器的作用和布置方法及布置位置,为今后智慧水利建设中类似工程的设计提供借鉴和参考。
会议