基于栅格细胞的高维空间函数拟合算法研究

来源 :沈阳理工大学 | 被引量 : 0次 | 上传用户:wangaimin143074
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
哺乳动物能够将它们所处的环境在大脑内部表示出来。位于海马体中的位置细胞只对环境中的某几个位置放电。位于内嗅皮层的栅格细胞对环境中的许多位置放电,其放电在二维空间地图中呈现为周期性的正三角形模式。在本研究中,我们从模型学习的角度研究栅格编码在海马和内嗅皮层神经回路中的功能优势。我们构建神经网络模型来学习从空间到抽象变量的映射,可以用于认知过程,如决策或运动控制。使得用栅格编码作为空间输入的网络实现了比使用位置单元输入的径向基函数网络具有更少的细胞数量的和更好的学习准确度。我们的结果表明,栅格表示在模型学习任务中构成更好的空间表示,并且可以帮助关联皮层更好地读出记忆神经回路中保存的信息。基于以上理论,本文提出了基于栅格细胞的高维空间函数拟合算法,主要贡献如下:(1)首先介绍了本课题在基础理论研究和实际应用研究的目的和意义,接着详细调研了脑科学在国内外的研究现状,并且分析了传统强化学习的优缺点。(2)根据栅格细胞特有的正三角形周期性放电模式提出了一个新的神经网络模型,取名为栅格细胞神经网络。该网络能拟合三维空间中的函数,拟合结果表明,在达到相同拟合精度的情况下,栅格细胞神经网络相比RBF神经网络能用更少的细胞拟合三维空间中的任意函数。(3)将栅格细胞神经网络与随机映射相结合,结合后的网络能够拟合高维空间中的函数,拟合结果表明,在达到相同拟合精度的情况下,栅格细胞神经网络相比RBF神经网络能用更少的细胞拟合高维空间中的函数。(4)将栅格细胞神经网络与Q-Learning相结合得到新的强化学习算法(简称GQL),对于小鼠寻找食物路径规划问题来说,栅格细胞神经网络相比RBF神经网络能用更少的细胞学习环境中的动作值函数,更适合于解决大规模环境的路径规划问题,缓解了强化学习中的维度灾难问题。
其他文献
随着互联网技术的快速发展,互联网应用的种类也日渐多样化。在生活中用户通常使用搜索引擎实现对名人、明星等特定人脸图像的获取。但传统的基于文本的图像检索具有检索方式
自电致变色效应第一次被报道以来,在这几十年里,电致变色效应得到了很多的研究,很多电致变色材料被陆续发现和研究,各种各样的电致变色器件也被发明和研究,应用到科研、军工
车牌筛选可以看做是一种对车牌识别的预处理过程。通过筛选出能够被识别的车牌图像,以及分析不能够识别的图像,修正车牌图像采集系统误差,来达到提高车牌识别准确率的目的。
随着微电子、嵌入式和通信等技术的发展,无线传感器网络以其无限应用前景得到了广泛关注。由于硬件设备、通信质量和周围环境等因素的影响,传感器节点所采集的感知数据具有不
图像特征提取是图像识别及机器视觉应用的关键,快速、准确提取图像特征是图像处理的首要任务。而传统的图像处理技术不够完善,存在由于特征提取算法的计算量巨大而导致整个系
集成电路(integrated circuit,IC)测试是IC产品制造过程中不可缺少的环节。它既要保证IC芯片的正确逻辑,又要保证IC芯片在规定的时间内做出正确的响应。随着IC系统工作频率的
在大数据时代,我们每天都会有数以万计的信息急需处理。作为一种直观的信息表达方式,图像早已普遍应用到各行各业中。如何快速且高效地实现图像分类是值得探究的热点问题之一
数据持有者经常需要将数据库对外发布以供研究或其它用途,而发布的数据中往往会包含有大量个体的隐私信息。在正常情况下这些发布的数据会被合理使用,但是与此同时这些数据也
近年来,机器视觉技术发展迅速,图像特征提取作为计算机机器视觉处理中的一个热门领域,在残缺字符处理、字符信息恢复等方面应用广泛,为古籍研究以及近现代残损书籍的还原和留
随着社会经济的发展,车辆越来越多。早晚高峰期城市道路出现过饱和的交通状态越来越频繁,交通拥堵日益严重,造成了车辆延误和行程时间的增加。过饱和交通状况引起的交通拥堵带来巨大的经济损失和社会代价。因此,有必要寻求一种高效的交通信号控制方法来协调城市交通流。交叉口作为交通信号控制的瓶颈,是交通协调控制的基础,而主干道作为城市交通的重要承担者,是交通协调控制的主要对象。因此,本文通过对交通流演化规律进行分