基于深度学习的智能控制研究

来源 :吉林大学 | 被引量 : 0次 | 上传用户:lifengxing0628
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机性能的提升以及机器学习的高速发展,车辆的五级自主行驶已经成为可能。因此民众对于智慧城之、智能交通的呼声也越来越高。车辆自主行驶系统作为智能交通的重要部分,对于其研究的紧迫性不言而喻。目前,大部分自主行驶系统都使用传统的局部路径规划以及车辆控制算法:环境感知算法对车辆行驶过程中周围的环境进行感知并将其转化为可供计算的特征,局部路径规划算法对环境感知的结果进行计算给出车辆预计的运动轨迹,车辆控制算法根据运动轨迹给出控制信号对轨迹进行跟踪的信号——其安全性与高效性完全取决于环境感知与局部路径规划的结果。而环境感知,路径规划与车辆控制作为独立的任务,无法从根本上进行有机的结合。对于自动驾驶而言,上述三个任务的结合越紧密,自动驾驶的准确性与安全性越高。本文主要研究深度学习与强化学习相结合的深度强化学习理论与方法,将环境感知、局部路径规划、车辆控制融合为一种智能控制技术,在上层模块更新驾驶任务后,根据环境感知结果、反馈设计公式给出的结果完成网络模型训练及预测,最终实现车辆自动驾驶的多场景任务。在自主搭建的仿真环境中进行动态行车环境的安全性分析,并根据车辆附近的障碍物信息以及当前行驶任务给出实时的车辆控制信号。行驶任务包括道路保持、并线、超车以及路边停车等车辆行驶中常见的场景。针对每一种场景设计不同的仿真环境以供深度强化学习网络模型完成相应的训练。在预测过程中深度强化学习网络模型将对不同的行驶任务进行无缝切换。本文的主要研究工作如下:1)设计了一种可在智能决策的基础上完成车辆智能控制的深度强化学习网络模型,该模型可在得到不同决策信号后完成决策对应的智能控制任务,如道路保持、左右转弯、变道以及路边停车。2)在使用仿真环境的基础上,根据深度强化学习网络模型的训练特点,提出了根据不同的使用场景制作不同的仿真场景的方式完成网络的多任务训练:通过随机出现行人或车辆,在停车时增加间距不等的障碍物等方式构造模拟真实情况下的仿真环境,根据深度强化学习网络模型的训练特点,实现道路保持、左右转弯、变道以及路边停车等多任务的训练。将多个任务转换为多个不同的马尔科夫模型。针对不同马尔科夫模型的不同状态转移概率矩阵,设计了不同仿真场景。3)在多仿真场景的仿真环境中,设计了针对当前场景的反馈计算公式以及终结条件进行分数计算。反馈计算公式的设计主要考虑当前场景的任务特点,比如是否靠近道路中线、是否远离障碍物等因素。4)深度强化学习网络模型将在这六个场景中同时进行训练,并异步的进行反向传播,改进网络参数,确保网络模型具有同时完成这六个功能的能力。该方法将提升网络的训练速度,同时避免了网络因长时间训练新任务而无法完成旧任务的情况。通过仿真环境验证,本文提出的方法完成车辆在不同行驶任务中的智能控制问题,有效的提升车辆自主行驶过程中的高效性与安全性。
其他文献
随着经济的发展全球生活污水及工业废水排放量日益增加,这其中包括含有较高浓度氨氮和硫酸盐的有机污染废水。传统的去除废水中硫酸盐、铵根的方法存在着处理费用高、处理规
针对轴向磁化圆筒永磁直线同步电机,提出一种基于圆柱坐标的标量磁位分离变量法的磁场解析计算方法,并利用该解析法对无槽电机的气隙磁场分布进行理论分析,得出气隙磁场的轴
经济与环境是支撑人类生存与发展的两个联系十分紧密的系统,经济活动发生在一定的环境中,与环境进行着往复循环的能量与物质交换,势必引起环境的变动。另一方面,环境是经济活
<正> 一、前言近年以来地质勘探、矿产普查和区域地质測量工作在党的英明领导下在全国范围內普遍展开,积累了大量的地质資料;这使我国大地构造的进一步研究不但成为可能而且
当今世界网络信息技术日新月异,互联网正在全面融入经济社会生产和生活各个领域,引领了社会生产新变革,也成为了企业创新发展不可忽视的重要引擎。在企业创新管理过程中,信息
分析萧县酿酒葡萄品质下降的原因,并提出对策,以供果农参考。
前人和时贤对上古汉语疑问代词有过研究,取得了许多重要研究成果,但是还没有人对秦至汉初疑问代词进行断代研究,所以本文的研究很有意义。本文以秦至汉初可信的文献做为语料,对其
<正>利用纯S波波形拟合方法,输入纯S波波形,使用传递矩阵计算了层状介质自底面传到地表约100 km厚度、32s的理论地震波形;引进快速模拟退火法进行反演搜索理想模型,用理论波
会议
为了研究壳聚糖对肉仔鸡生长性能、免疫功能以及小肠组织形态发育的影响,选用1日龄AA雄性肉仔鸡270只,按体重随机分为5组,每组设6个重复,每个重复9只鸡,进行为期42天的饲养试
学习经验更新观念──包头市异地培训干部收效显著近年来,为适应改革开放和经济建设的需要,包头市在充分利用当地培训基地,采取各种形式的培训各级干部的同时,积极开展了异地培训