一种基于数据标准差的卷积神经网络量化方法

来源 :电子学报 | 被引量 : 0次 | 上传用户:nosmallstar2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当前卷积神经网络模型存在规模过大且运算复杂的问题,难以应用部署在资源受限的计算平台.针对此问题,本文基于数据标准差提出了一种适合部署在现场可编程门阵列(Field Programmable Gate Array, FPGA)上的对数量化方法 .首先,依据FPGA的特性提出对数量化方法,将32 bit浮点乘法运算转换为整数乘法及移位运算,提高了运算效率.然后通过研究数据分布特点,提出基于数据标准差的输入量化及权值混合bit量化方法,能够有效减少量化损失.通过对RepVGG、EfficientNet等网络进行效率与精度对比实验,8 bit量化使得大型神经网络精度仅下降1%左右;输入量化为8 bit,权重量化为10 bit场景下,模型精度损失小于0.2%,达到浮点模型几乎相同的准确率.实验表明,所提量化方法能够使得模型大小减少75%左右,在基本保持原有模型准确率的同时有效地降低功耗损失、提高运算效率.
其他文献
针对直驱式风电机组接入弱交流电网诱发次同步振荡(subsynchronous oscillation,SSO)问题,提出一阶线性自抗扰控制(linear active disturbance rejection control,LADRC)策略抑制该现象,从而提高系统稳定性。首先,建立直驱式风电机组的并网数学模型,分析次同步振荡频率扰动分量的传播机理;然后,进行一阶LADRC电流内环控制器设计以及
期刊
随着自动化、信息化和无人化的科技的迅猛发展,无人机倍受人们青睐,其使用范围逐渐扩大到各种工业领域和人们的日常活动当中。目前应用最普遍的是四旋翼无人机,其不仅能够进行垂直起降和稳定的悬停,而且具有飞行损耗小、制造成本低、机动性能强和不容易被发现等特点。当无人机在户外执行任务时,由于天气等不明因素,在其飞行区域时常存在不确定性极强的风干扰,因此这种情况对无人机的飞行安全和其能否顺利完成正在执行的任务造
学位
电力行业作为关系国计民生的重点基础行业,肩负电力系统关键信息基础设施建设、运营及数据安全等多重使命,已成为国家级网络攻击的重点目标。而以风力、太阳能为代表的新能源发电系统作为未来新型电力系统的主力电源,保障其网络安全对保障电力稳定供应、维护国民经济稳定和国家安全具有重要意义。近期,欧洲多家风能公司遭遇网络攻击,涉及风电机组8000余台,严重影响了当地电力的正常供应和电力系统的稳定性。本文对近期所发
期刊
期刊
期刊
<正>2020年以来,铜价大幅上涨,给我国的家电制造业带来了巨大的成本压力,大幅压缩了企业的利润空间。作为用铜大户的空调行业,对铝在空调产品的应用这一解决方案持续关注。为了向行业及消费者普及铝应用的发展情况,积极开展空调产品铝应用的技术研究,需要我们从技术成熟度、消费认知度两个维度助力推动空调行业铝应用的普及和发展。
期刊
纳米氧化锆(ZrO2)由于具有强度大、硬度高、耐磨损性好、抗热震性好、热导率低、生物相容性好等优点,在特种耐火材料、催化材料、生物医学材料等领域都有着广阔的应用前景。氧化锆主要有三种晶格类型,分别为单斜相氧化锆(m-ZrO2)、四方相氧化锆(t-ZrO2)和立方相氧化锆(c-ZrO2),每种晶型的ZrO2都有着各自独特的优势;球形度高的纳米ZrO2颗粒具有良好的流动性,有利于颗粒的均匀分布,形成较
学位
期刊
机器学习模型能够有效解决变量间的共线性问题,处理变量间的非线性关系及交互影响,故其预测能力显著高于普通的线性模型。选取2004年1月—2021年12月8个大类资产因子的周数据,构造随机森林模型考察了模型的预测能力、特征的重要性和影响以及所建投资组合的投资绩效。研究结果表明:相对于普通OLS及LASSO模型,随机森林模型的预测能力显著提高;量价特征尤其是动量因子在随机森林模型中的重要性要远高于宏观特
期刊
目的:探讨糖尿病酮症酸中毒病人(DKA)患者的临床特征、发病机理、诊断、实验室检查以及治疗。方法:报道1例非高血糖为表现的糖尿病酮症酸中毒病人。通过查血糖、血酮体、生化、血气分析等检查,给予正规补液、降血糖、纠正酸中毒等治疗,并复习相关文献。结果:本例非高血糖为表现的糖尿病酮症酸中毒比较特殊,经过对症治疗后治愈出院。结论:糖尿病酮症酸中毒中的血糖水平高低不是诊断的主要条件,病人的病程长及应激反应弱
期刊