基于模糊逻辑和强化学习的交通信号优化方法设计与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:cnjhhzy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,我国社会经济高速发展,城市规模逐渐扩大,伴随而来的是城市中的机动车数量的快速增加,由此造成道路拥堵、交通事故频发、汽车尾气排放污染环境等一系列问题。解决这些问题的关键途径是提升路网的通行能力,通过减少车辆在交叉口的延误时间来提高城市路网的通行效率。在以上背景下,本文设计并实现了三种城市单交叉口的交通信号控制方法,并通过二次开发Sumo仿真软件进行对比分析。(1)设计与实现一种交通灯信号的模糊控制方法。该方法基于四相位定相序对单交叉口交通灯进行控制,采用两层模糊控制系统,第一层模糊控制系统输入为车辆排队数和车辆到达率,输出为当前相位和下一相位交通流强度。第二层模糊控制系统以两个相位的交通流强度作为输入,输出为当前绿灯相位的绿灯延长时间。实验结果表明该方法的控制性能优于Sumo仿真软件自带的定时控制方法与传统模糊控制方法。(2)利用遗传算法来优化模糊控制系统。将模糊规则和隶属度函数参数编码为染色体,以车辆平均等待时间等评价指标构建适应度函数。种群迭代过程中,将个体解码为模糊控制系统的规则和隶属度函数参数,然后利用仿真软件对个体代表的控制系统进行仿真,得到个体评价函数值。在选择过程中加入了精英保留策略来保证最优个体不被破坏。经过遗传算法优化后,模糊控制系统控制交通信号灯的性能得到明显提升。(3)利用强化学习方法解决单交叉口交通信号灯控制问题。该方法充分利用路网传递的交通流参数,将路网截取为位置、速度矩阵,并将其作为输入状态。采取车辆的平均等待时间作为奖励函数,输出相位的持续时间作为动作。求解Q值时,为了解决过度估计问题,采用双竞争深度Q网络算法。实验结果表明,该强化学习方法控制性能优于Sumo自带的定时控制方法。(4)在上述算法的基础上,设计与实现了一个交通信号灯控制仿真系统。该系统包括用户管理、交通元素管理、交通信号灯控制方案仿真、任务管理等功能模块,能够根据单交叉口的车流数据自动决策信号灯的相位周期,为交通管理人员提供易于操作的交通仿真工具。
其他文献
随着互联网的迅猛发展,图像多元化处理的需求越来越大,而图像风格转换也逐渐成为当下人们关注的一个研究热点,具有广泛的研究意义与应用价值。近年来,传统的基于深度卷积神经网络的图像风格转换技术遇到了巨大的挑战。而生成对抗网络的提出为图像风格转换问题的解决提供了一种全新的思路,并且生成对抗网络在生成图像分辨率、样本的真实性等方面都取得了更好的效果。因此,基于生成对抗网络的图像风格转换已成为当下的一个研究热
对高强度支护技术在煤矿采煤掘进工作面的作用进行了概述,详细阐述了煤矿采煤掘进工作面高强度支护技术应用存在的问题,最后有针对性地提出了加强煤矿采煤掘进工作面高强度支护技术应用的措施,为加强高强度支护技术的应用提供了些许借鉴.
在深埋隧洞混凝土衬砌施工过程中,高落差的竖井采用溜管输送混凝土是一种可以采用的自落式混凝土垂直输送系统.竖井为人工造孔,深埋于地下,落差高,无人工检修空间,又无应急放料口,所以对混凝土拌合物的质量要求高、施工工艺要求严格.针对上述问题,通过不断研究,现场反复试验,并形成了一套完整的竖井高落差溜管输送混凝土施工工艺,文中对其高落差竖井输送混凝土的溜管系统的组成、施工工艺流程、各施工环节的注意事项及控制要点进行了进一步的阐述.目前,这种方法已经在山西小浪底引黄工程(引水干线部分)施工V标隧洞衬砌混凝土施工中得
基于2013-2017年的长治市水资源数据,对水资源利用的时空变化特征进行分析.结果 表明:随着时间的变化,水资源总量的减少幅度大于用水总量的减少幅度,水资源供需矛盾日益突出;在用水结构中农业用水占比最高,年际间用水结构呈“三增一降”的形态;沁源县水资源利用相对变化率最大,潞城区的水资源利用相对变化率最小.研究结果对于分析长治市水资源开发利用提供参考.
为了确保农业现代化园区防洪安全,打造河道生态景观建设,促进河道景观与现代园区和谐发展所采取的生态固滨笼河道治理措施的应用,以辽阳市马峰河河道治理工程为例,通过对生态固滨笼填石的平均粒径及冲刷深度的计算,为生态固滨笼在河道治理中的安全稳定性提供数据支撑,同时为类似河道治理工程提供参考和依据.
在河道整治工程设计中,特别是有防洪任务的河段,应在确定的河槽断面基础上,根据防洪规划(治导线)、地形地质条件河床演变情况、现有工程状况、拟建工程位置、征地拆迁量等,经技术经济比较后,合理布置堤线.文中以介休市龙凤河综合治理工程为例,针对不同堤距,提出60 m、90 m和100 m三个方案进行比选,为进一步研究河道堤线布置提供借鉴.
文中结合铜陵市河湖划界工作实践,论述划界工作出现的新问题及相应处理方法.如:丘陵山区无堤防河源点如何确定、支流入河口位置如何确定、涉河水利工程处管理范围边界线如何确定、共堤段河湖外缘边界线如何确定、历史数据与实际情况有差异的如何确定等,为今后河湖管理工作提供参考.
生态护岸在汾河百公里中游示范区介休段生态治理中得到了广泛的应用,通过对各种生态护岸型式的比选分析,掌握各种生态护岸的适用条件,为以后类似工程提供宝贵经验.
新疆依苏滚厄肯河沿岸防洪标准较低,多年来洪灾严重,给哈拉峻乡阿亚克苏洪村居民造成较大损失.文中对依苏滚厄肯河的洪水特性进行分析,并对阿亚克苏洪村的防洪现状进行评价,洪水特征为暴雨型山洪,针对洪水瞬时来水量大、冲刷破坏性强、缺乏必要工程措施等问题,提出防洪整治措施,保障当地居民生命财产安全及促进当地社会经济的健康发展.
采用浸渍法,以脱脂棉和经硝酸预处理后的脱脂棉为生物模板,成功制备了具有纤维条状结构的Ba-MgO载体,并等体积浸渍了活性组分Ru,制得了负载型Ru/Ba-MgO氨合成催化剂.运用XRD,FE-SEM,FTIR等方法对所制备纳米Ba-MgO载体的表面性能进行表征,对所负载的Ru基催化剂进行氨合成催化活性评价,并探讨了纤维条状结构Ba-MgO载体的形成机理.实验结果表明,所制备的Ba-MgO载体表面存在卷曲、褶皱等变化,在电子显微镜下可见纳米级颗粒;比表面积和孔体积增大;助催化剂Ba的吸附量增多;Ru/Ba-