异构融合类脑计算平台的计算模型与关键技术研究

来源 :清华大学 | 被引量 : 11次 | 上传用户:SOHOCJ
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近几年,借鉴人脑信息处理机制的类脑计算平台呈现爆炸式发展,共同推动智能革命时代的到来。现有类脑计算平台主要有两种实现途径:深度学习专用处理器与神经形态芯片及系统。前者借鉴大脑层级处理与学习训练的特性,基于现有冯·诺依曼处理器架构,提供高性能的深度学习引擎,但其时空表达能力和泛化通用性仍远不如大脑;后者借鉴大脑时空关联特性,采用众核分布并行与存储处理一体化的架构,致力于提供人工通用智能的解决方案,但其机理和应用尚不够清晰成熟。为此,本文提出异构融合类脑计算平台的研究课题,将深度学习理论、神经动力学以及神经形态架构进行深度融合,为探索基于混合模型的通用类脑计算架构提供新思路与新平台,同时支撑人工智能应用与神经科学研究。完成的主要内容与成果包括:1.针对深度神经网络,结合类脑计算平台的存储容量约束,提出深度神经网络多阶离散化在线学习理论。避免训练过程中高精度隐含权重的存储,大大节约存储资源,为未来在线学习类脑计算平台提供指导;并可进一步灵活配置权重离散状态的数目,充分发挥实际硬件平台的计算能力。2.针对神经动力学网络,介绍脉冲神经网络的计算与学习框架,研究典型的连续LIF动力学网络。设计模式学习网络的硬件实现方案;提出层级分块序列记忆网络及其参数编码方法,演示记忆动力学过程并揭示分块机制与突触可塑性的关系;对目标追踪网络进行硬件友好改造,研究网络的灵敏度与稳定性。3.设计基于忆阻器技术的神经网络与理想类脑计算平台,搭建电路仿真环境,验证模式学习与序列记忆模型,并定量分析器件动态范围与差异性对网络性能的影响。建立忆阻器调制能耗的估计方法,提出低能耗优先调制的策略,有效降低忆阻器网络的调制能耗。4.设计基于数字电路技术的天机系列异构融合类脑计算芯片,建立各类网络的整型化与映射理论,搭建软硬件平台。“天机芯Ⅰ”旨在深度学习与神经动力学以及神经形态架构的融合,通过实现深度神经网络与目标追踪动力学网络,设计了无人智能自行车应用,实现姿态平衡控制、目标探测与实时追踪。“天机芯Ⅱ”旨在提高芯片的应用性能,在网络规模、模型复杂度与扩展性以及运行速度方面进行全方位优化,通过嵌入异构通信机制允许混合网络建模,并通过按行流式映射与“浮点数卷积+三值化全连接”的方案支持高性能大规模深度神经网络的实时运行。
其他文献
随着心血管急危重病人增多,主动脉球囊反搏技术(IABP)辅助下病人的院内检查及手术等工作频繁,转运中的安全是保证急危重病人抢救工作的前提。加强医患沟通、认真评估及准备、
产前诊断可以预测胎儿出生前是否存在遗传性疾病或者是先天性畸形,目前临床上常用的产前诊断技术有免疫遗传技术、现代生物学技术、分子遗传学技术、生物化学技术、细胞遗传
近几年,国内广播保持了强劲的发展势头,专业频率不断增加、广告收入持续增长,但这种快速发展在一定程度上是以牺牲传媒生态资源和破坏传媒生态环境为代价的;表面繁荣的背后隐
《撒贝宁时间》是央视综合频道于2013年推出的一档法制类刑侦推理节目。该节目将主持人作为案件解析人,并使其不断进行角色转换,循序渐进地进行背景导入、推理论证及分析定论
在杨荫浏先生的《中国古代音乐史稿》一书中提到这样一句话:"被压迫阶级是不会爱雅乐的,他们爱的是人民创造的音乐。"杨先生是凭着例举了李自成爱秦腔和太平天国农民起义军爱
探讨民间体育与魅力乡村融合发展问题。研究表明:特色小镇进程对乡土村落的冲击与消解,乡村中传统道德呈现出碎片化、边缘化,乡村精英离家飘荡以及趋于没落的民俗民间体育活
中央第一生态环境保护督察组已经进驻辽宁,开展生态环境保护督察“回头看”工作,这是继第一轮督察之后,对我省加强生态文明建设和生态环境保护工作的“全面复查”和“再次会诊”
报纸
本文对浪漫主义时期德奥艺术歌曲发展史上三位重要的作曲家舒伯特、舒曼、勃拉姆斯的艺术歌曲创作进行分析。涉及作品、诗词、钢琴、作曲技法、风格等多个方面,旨在介绍德奥
目的:观察炎琥宁在小儿病毒性肺炎中的临床治疗效果。方法:选择我社区门诊2013年6月~2014年2月收治的68例病毒性肺炎患儿,按照诊疗先后顺序编号,奇数号作为对照组,偶数号作为
从股票价格的形成过程入手提出可交易价值的概念,指出名义股价、流动性和波动性是其可能的影响因素。接着运用面板数据分析法对我国股市的周交易数据进行实证,发现可交易价值