【摘 要】
:
近年来随着深度学习技术的发展,深度神经网络在诸多领域取得了令人瞩目的成就。深度学习技术在生产生活中的广泛应用也为深度学习的发展带来了全新的挑战。特别在安全领域的应用中,决策系统的鲁棒性尤为重要,因为错误决策可能会带来生命财产的损失。因此,探索深度学习模型的鲁棒性成为了深度学习发展的重要领域。在该动机驱使下,人们发现了对抗样本现象:深度学习模型在面对恶意注入的细微扰动时显现出了令人惊讶的脆弱性。具体
论文部分内容阅读
近年来随着深度学习技术的发展,深度神经网络在诸多领域取得了令人瞩目的成就。深度学习技术在生产生活中的广泛应用也为深度学习的发展带来了全新的挑战。特别在安全领域的应用中,决策系统的鲁棒性尤为重要,因为错误决策可能会带来生命财产的损失。因此,探索深度学习模型的鲁棒性成为了深度学习发展的重要领域。在该动机驱使下,人们发现了对抗样本现象:深度学习模型在面对恶意注入的细微扰动时显现出了令人惊讶的脆弱性。具体来说,当对样本注入细微的、难以察觉的对抗扰动后模型的输出会发生恶劣的变化。如此极端的不稳定性为深度学习的发展带来了令人兴奋的机遇和巨大的挑战。为了应对对抗样本现象,人们从多个角度进行了广泛而深入的研究。为了更好地完成模型对抗鲁棒性的评估,对抗攻击的相关研究集中于如何生成更具有攻击性的对抗样本。虽然对抗攻击领域内涌现了很多令人激动和极具贡献性的工作,但现有的方法要么存在着假设过强的缺陷要么存在着弱假设下性能和效率低下的问题。为了抵御对抗攻击,对抗防御聚焦于提升模型的对抗鲁棒性。虽然在前人的努力下对抗防御领域已经取得了长足的进步,但是现有方法的性能仍差强人意。为了揭示人类认知系统与深度学习模型之间的差异,在解释对抗样本现象存在原因方面也出现了大量的极具价值的探索。然而解释对抗样本现象的现有假说往往难以验证其自身的有效性,也难以指导对抗攻击和对抗防御的发展。本文基于对前人工作的理解,针对现有方法存在的问题从数据分布的观点出发深入探索了深度学习的对抗鲁棒性。基于数据分布的研究思路,本文提出了对抗区域假说并从因果推理的角度给出了对抗样本现象存在原因的解释。对抗区域假说的核心观点为:对抗扰动所在子空间是脱离数据局部流形切空间的最快方向,因而该子空间(对抗区域)内的所有样本对模型都具有潜在威胁性。因果推理能够通过建模数据分布生成过程的方式充分挖掘数据分布的性质,所以可以被用来探究数据分布的性质。本论文的贡献可以总结如下:·本文提出的对抗区域假说为理解对抗样本现象提供了基于数据分布观点的新视角,扩充了现有的解释对抗样本存在现象的假说。该假说指出,空间中某个特定区域的样本对模型具有潜在的威胁。因此可以通过建模对抗区域的方法来生成对抗样本,这使寻找对抗样本的过程摆脱了对模型的依赖。基于这一观点,本文提出了主成分对抗样本。该方法是首个基于被攻击模型极少量信息的对抗样本生成方法,并验证了对抗区域假说的合理性。·针对现有黑盒攻击效率较低的问题,本文从对抗区域假说出发提出了使用最优分布提升黑盒攻击效率的方法。本文证明了黑盒攻击下最优分布的存在性。该证明使提升黑盒攻击有效性的问题转化为了最优分布的近似问题,为黑盒攻击的发展提供了新的思路。为了提升黑盒攻击的性能,本文引入了目标模型训练数据可获取的假设,并给出了近似该最优分布的方法。本文进一步探索了在该假设不成立情况下的最优分布近似问题。为了近似黑盒攻击中的最优分布,本文定义并求解了高效的黑盒攻击问题进而提出了双路径蒸馏框架。该框架仅通过对反馈信息的充分挖掘便能够完成最优分布的近似。大量的实验表明该框架能够在不引入额外开销的情况下大幅提升黑盒攻击的性能。·为了进一步理解并缓解对抗样本脆弱性的问题,本文首次建立并挖掘了因果推理与对抗样本之间的联系。本文从因果推理的视角给出了对抗样本脆弱性产生的原因:是模型对非语义信息与标签信息之间的虚假相关性的过度关注导致了对抗样本现象的产生。本文还进一步挖掘了该虚假相关性的具体影响,发现了对抗分布与自然分布的差异来源。为了消除两个分布间的差异,本文提出了缓解对抗脆弱性的对抗分布对齐算法。大量的实验验证了该方法的有效性。这一探索为今后基于因果推理解决对抗样本问题提供了新的思路。
其他文献
甘蔗(Saccharum spp.)作为最主要的糖料和生物燃料的原料作物,提供了全世界80%的糖和40%的乙醇。甘蔗属是由六个种组成,分别是四个栽培种,热带种、中国种、印度种和肉质花穗种,以及两个野生种,大茎野生种和割手密种。其中,割手密种是甘蔗育种中最重要的野生种质资源,其为甘蔗栽培种提供了抗病、抗逆、抗倒、丛生性和适应性等优良的农艺性状基因。目前世界上主要的甘蔗栽培品种中均含有割手密的血缘。但
<正>当今世界正面临着百年未有之大变局,各行各业都遇到了各种各样的运营问题,生产制造业面临着原材料涨价,原材料供应不足,生产流程再造等严峻问题。销售企业也同样面临着客户购买力及忠诚度下降,售后服务和销售能力不强,市场占有率低下等问题。如果未进行合理的资源分配和资源利用将会导致企业面临更大的财务和发展困境。
聚乙烯及其共聚物薄膜是目前使用量最大的高分子薄膜品类,广泛应用于包装、农业、能源等领域。挤出吹膜是聚乙烯及其共聚物薄膜的主要成型方法,深刻理解聚乙烯及其共聚物吹膜加工中结构演变机理对于发展高分子薄膜加工基础理论和指导薄膜产品开发具有重要意义。分子量及其分布,共聚单体和支链结构的类型、含量等赋予聚乙烯及其共聚物丰富的化学结构参数,使其能够满足不同的服役需求。吹膜加工中,在多个工艺步骤和参数作用下,聚
柴达木盆地涩北气田为典型的多层疏松砂岩气田,气田具有埋深浅、成岩作用弱、储层敏感性强、易出砂等特点。随着涩北气田开发深入,气田普遍存在着出砂、出水加剧和地层压力下降明显等问题。常规冲砂存在冲砂效率低、遇阻频繁、冲砂液漏失、易产生储层污染等问题。通过冲砂液配方优化、地面泡沫发生筒和冲砂工艺方案的优化等措施,提升连续油管氮气泡沫冲砂工艺在涩北气田的适应性。现场应用表明:该工艺优化后提高了冲砂效率,成功
合肥先进光源(HALF)是第四代衍射极限储存环光源,辐射光谱主要位于真空紫外和软x射线区,其超高的亮度和极低的发射度要求束流轨道稳定度达到亚微米级别。除了提高磁铁精度,增强支撑装置的稳定性等,实时的全局轨道反馈控制是稳定束流轨道必不可少的方法。设计中合肥先进光源的快轨道反馈系统(FOFB)的更新速率为10 kHz,需要采集240个束流位置数据和控制160个快校正电源(水平方向和垂直方向各80个)。
双轴取向聚对苯二甲酸乙二醇酯(Biaxial oriented polyethylene terephthalate,BOPET)薄膜具有透光率高、力学强度大、阻氧阻湿性能优异、物理和化学性能稳定等特点,在包装、印刷、光伏、光学显示以及其它特殊领域都有极其广泛的应用。随着光伏、电子电器以及新型显示行业的快速发展,对于具有特种性能的BOPET薄膜的需求越来越急迫,例如需要薄膜具有极低或极高的取向、高
<正>癌症是全球死亡的主要原因,在英国,2017年所有死亡中有28%可归因于癌症,结直肠癌、乳腺癌和前列腺癌合计占所有新发癌症病例的39%,据估计,近40%的癌症病例可以通过可改变的因素来预防。尽管已经提出了几种饮食因素会影响患癌风险的高低,但目前仍不清楚饮食模式是否与患癌风险有关。2月24日,《BMC Medicine》上发表的一篇研究论文,称每周只吃五次或更少的肉与较低的整体癌症风险有关。
气相-表面体系中的能量交换涉及许多工业应用的核心。在这种能量交换的过程中会有一部分能量耗散到表面导致表面被热化,由此造成不必要的能量损失。研究能量交换过程中的能量耗散对于调控气相-表面动力学来说具有重要意义。考虑到气相-表面体系的复杂性,目前量子动力学计算无法考虑表面自由度因而不能描述气相-表面体系的能量耗散过程,而准经典轨线方法作为探究量子分辨动力学的有效工具已经被广泛应用于各种气相-表面相互作
随着互联网应用的快速发展,用户的数据呈指数型增长,存储系统对容量以及性能的需求越来越高。保证高可靠性是存储系统的基础功能,多副本和纠删码是存储系统常用的两种容错存储策略。多副本通过多倍的冗余来保证存储系统的高可靠性。相对于多副本,纠删码能够用低存储开销提供高可靠性,但是在数据读写、降级读以及故障修复等过程中,需要大量的跨节点数据传输和编解码计算,所以网络和计算常成为性能瓶颈。一般来说,纠删码存储系
二维有机骨架材料具有比表面积大、空隙结构可调和电子结构易于调控等诸多优点,其在化学领域具有广泛的应用前景,已成为当前基础研究的热点之一。然而,二维有机骨架材料在物理领域的研究才刚刚起步,基于二维有机骨架材料的拓扑平带、量子反常霍尔效应和铁磁等新颖量子物性的研究尚不够深入。本论文结合密度泛函理论和紧束缚模型,系统地研究了二维有机骨架材料中的拓扑平带、自旋极化以及面内量子反常霍尔效应。本学位论文包括如