基于深度强化学习的智能交通控制方法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:zero_ak47
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
21世纪以来,随着人口的不断增加,交通拥堵已经成为各大城市普遍存在且急需解决的问题,改善和优化交通控制方法是解决交通拥堵问题有效的方法之一。随着科技的不断发展和对机器学习领域研究的不断深入,深度学习和强化学习等新的研究方向不断地被运用于解决各种实际问题,城市智慧交通控制的研究也因此迈向了新的发展阶段,设计并开发基于深度学习和强化学习的更加高效的智能交通控制系统具有重要的意义和研究价值。本文研究内容如下:首先,交通流量作为交通控制系统的重要组成部分,可以很好的为智能交通控制提供参考性依据,本文提出一种基于ALO-LSTM的交通流量预测算法。城市交通流量数据在时序上具有一定的特征规律,因此本文使用LSTM神经网络模型来建立交通流量预测模型。在建立预测模型过程中,针对神经网络参数初始化的随机性导致预测模型训练效果不佳的问题,利用蚁狮优化算法ALO对LSTM模型的初始参数进行优化,ALO算法具有良好的全局搜索和优化能力,可以加快预测模型收敛的时间,提升LSTM预测模型的性能。通过实验分别用LSTM和ALO-LSTM算法对交通流量进行预测,并分析算法的有效性。其次,针对基于强化学习的交通信号控制方法中存在的状态空间爆炸以及复杂路网中的多路口协作问题,提出一种基于协作式深度Q学习的多路口交通信号控制方法。通过建立城市交通信号控制模型,利用深度强化学习发掘交通状态中的内在信息,直接从高维数据中学习到有效的控制策略,综合考虑路口自身的交通状态数据以及邻接路口的影响,通过神经网络训练得出当前路口信号灯的最佳执行相位。同时,在学习过程中利用经验回放机制和目标网络的策略来提高学习算法的稳定性。在GLD仿真平台下,通过实验在不同拥堵程度的仿真路网环境下验证算法的有效性。最后,针对深度强化学习在训练过程中由于需要不断试错导致迭代求解过程非常费时的问题,将启发式Q学习与深度强化学习相结合,提出一种基于启发式深度Q学习的多路口交通信号控制方法。结合城市路网环境中的交通流量数据来确定启发函数,在深度强化学习的动作选择阶段,利用启发函数来引导agent对状态动作空间的探索,加快算法的学习速率。通过实验在不同拥堵程度的仿真路网环境下验证算法的有效性。
其他文献
随着工业化与信息化的深度融合,工业物联网在得到快速发展的同时,面临着日益严峻的信息安全风险。其中,工业物联网节点脆弱的安全性和易被攻击等特点,使得其受到高度关注。工
近年来,事件驱动通信作为一种替代连续通信和传统周期通信的新方法在多智能体领域受到了广泛关注和研究。通常,为达到多智能体系统的一致性或协同控制,通信网络中的所有智能
提起英国浪漫主义诗人雪莱(1792年-1822年),多数中国读者会想起他那句著名的“如果冬天来了,春天还会远吗”。雪莱的这句名诗不知给多少陷入黑暗和绝望的人带来希望的曙光和前
报纸
<正>前言衣、食、住、行是人民幸福生活的基础。在当今中国,人民对居住环境的要求越来越高,是人民幸福生活的具体体现。而房子会变老,人民对居住环境的要求会随着社会发展而
会议
曾侯乙墓是重要的考古发现,有着巨大的价值。墓中共出土礼器、乐器、漆木用具、金玉器、兵器、车马器和竹简15000余件,仅青铜器就共计6239件。曾侯乙墓出土的青铜器使用了浑
随着冷战的结束,世界开启多极化进程,海峡两岸在传承中华文化的情势上发生了一些变化。中国大陆地区在改革开放的推动下,经济持续、快速发展,文化建设与改革发展协同促进。中
<正>刊物介绍《拳击与格斗》杂志创刊于1987年,为国家新闻出版署正规出版物,社科类一级期刊,吉林出版集团主管、拳击与格斗编辑部出版,国内刊号:CN22—1011/G8,国际刊号:ISSN
听力能力是外语学习的基本技能之一,在语言学习的过程中占据着不可或缺的重要地位,在听说读写能力中,听力的作用最为基础,直接影响着学生整体语言水平的发展(金晓添,2019)。在当前高中英语课堂教学中,教学重点普遍为词汇语法课,课堂上缺乏有效的英语听力训练,当教师用英文提问时,大多数学生无法准确获取提问内容,只会低头沉默。长期下去,会让学生对英语听力缺乏自信心,丧失英语听力兴趣,容易在听力过程中出现过多
我国的社会经济的发展方向都是以党的领导和建设为基础,党国建设更是我国企业发展的传统文化,也代表着企业发展的根与魂。现今我国企业的发展中其运营发展极为重要,党建工作
随着经济发展和产业结构转型,依托互联网的飞速发展,我国生鲜产品流通正在逐步由传统渠道转变为新兴渠道。资本巨头的加入使得市场竞争进一步加剧,涌现了大量的生鲜电商平台