基于SAC深度强化学习算法的插电式混合动力汽车能量管理策略

来源 :山东大学 | 被引量 : 0次 | 上传用户:wwbywbytc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着全球范围内环境污染问题日益严峻,发展节能环保的新能源汽车成为汽车产业发展的主要方向。其中,插电式混合动力汽车(Plug-in Hybrid Electric Vehicle,PHEV)融合了纯电动汽车低排放以及传统内燃机汽车长续驶里程的优势,成为我国新能源汽车“三纵三横”研发布局中的重要发展方向之一。能量管理策略作为PHEV关键技术之一,其通过在发动机和电动机之间优化分配功率流,从而实现整车高效运行。然而,由于车辆行驶工况复杂多变,如何解决能耗最优与工况适应性之间的矛盾对于混合动力汽车能量管理策略仍是一个颇具挑战性的问题。为此,本文设计了基于长短时记忆网络(Long Short-Term Memory,LSTM)的车辆需求转矩预测模型,提出了基于自动熵调节Soft Actor-Critic(SAC)深度强化学习的能量管理策略,进一步借助云车协同框架提出基于云端的深度强化学习能量管理策略。本文具体工作如下:1.本文首先针对单轴并联插电式混合动力汽车搭建包括发动机、动力电池、电动机以及车辆纵向动力学方程在内的整车动力系统模型,并基于AVL CRUISE仿真平台开展车辆动力性能验证。2.针对车辆需求转矩预测问题,设计了基于LSTM的车辆需求转矩预测模型,并与传统基于BP(Back Propagation,BP)神经网络模型的预测性能进行了对比分析。结果表明,基于LSTM的需求转矩预测模型预测准确度提升86.63%。在此基础上,为保证车辆的安全性研究了基于LSTM神经网络的需求转矩双预测模型,需求转矩预测精度进一步提升44.04%。3.提出了一种基于自动熵调节SAC深度强化学习算法的PHEV能量管理策略。具体的,选取电池荷电状态(State Of Charge,SOC)、需求转矩、加速度、车速、档位信息作为策略的状态,以提高燃油经济性以及避免电池组过度放电为目标,将发动机转矩作为输出,通过引入自动熵调节机制,有效提升了该策略对不同工况的适应性。为进一步验证所提方法的优越性,分别与基于深度确定性策略梯度算法(Deep Deterministic Strategy Gradient,DDPG)、基于固定熵的SAC算法以及等效燃油消耗最小能量管理策略(Equivalent Consumption Minimum Strategies,ECMS)进行对比,结果表明,基于自动熵调节的SAC能量管理策略具备超参数敏感性低、自适应性强等性能,与等效燃油消耗最小能量管理策略相比燃油经济性提高4.37%,同时对电池SOC具有良好的控制效果。4.借助云计算性能并考虑发动机特性提出基于云端、车端融合架构的深度强化学习能量管理策略。在借助滑动窗口原理减少云端数据上传量、降低发动机启停频率以及相邻时刻转矩变化量的基础上,基于专家经验知识实现了发动机工作点在高效区的合理分布,并在真实工况下进行仿真验证。结果表明,所提方法可以有效实现云车交互,并实现降低发动机的启停频率的优化目标。
其他文献
在VUCA的时代背景下,企业所掌握的信息越多,其越能对于环境的变化做出快速反应。而组织信息的重要来源是员工,但诸多研究表明,组织中存在大量的“知而不言”现象。尽管组织已经建立各种建言渠道,却依然未起到满意的效果。由此可见,员工沉默行为的影响因素研究的重要性。近年来,随着外部环境竞争的增加,员工在工作形式和角色期望等方面都发生了变化,其面临的压力不仅特性和形式更加多元化,而且强度在持续增大。不合规任
学位
临床上肛门坠胀病因较复杂,中医考虑多为湿热内蕴,下注肛门,气机不畅引起,止痛如神汤在治疗肛门坠胀上有一定疗效。
期刊
2020年山东省城市建设完成投资1642.7亿元,比上年增长9.3%。自2000年1月1日《中华人民共和国招标投标法》实施以来,我国的建设工程的招标率从63%提升到现在的95%。随着建设工程的规模日益成长,市场主体之间公平公正和高效率的竞争也成为主流,招标过程中的评标显得尤为重要。综合评分法作为目前评标过程中使用最广泛的评审方法,而评定分离的日趋普及也加大了评审过程的复杂性。如何优化综合评分法,科
学位
随着中国经济迈入新发展阶段,创新成为经济发展的重要驱动力,科技创新也成为国际战略博弈的主战场,提升我国的区域创新能力迫在眉睫。外部性理论和内生增长理论为财政支持区域创新能力建设提供理论依据。理论上财政科技支出会通过资金支持、政策引领、环境支撑等方式作用于区域创新能力建设。基于理论分析,论文首先从时间和空间两个维度擘画财政科技支出的发展态势及空间布局:样本期内各省财政科技支出的绝对规模逐年攀升、相对
学位
小微企业是新时代经济体中最庞大的基础群体,对于经济稳定快速发展贡献着重要力量。但由于自身情况和传统体制的影响,小微企业向商业银行申请传统性贷款产品,经常性的面对融资难、融资贵的问题。因此,面对中小微企业面临的发展困难,政府部门也相继制定了相应扶持措施,促进普惠型金融服务的开展。中国各金融机构也响应国家的号召、适应市场经济变化,强化了对小微企业融资渠道的支持力度,同时也不断完善小微企业贷款机制。中行
学位
新粒子生成(NPF)是大气气溶胶和云凝结核(CCN)数浓度的重要来源,对地球辐射平衡存在潜在影响。新粒子生成过程分为两个阶段:首先,气态前体物冷凝形成1 nm左右的团簇,然后通过凝结、碰并等方式增长至较大粒径范围。新粒子生成事件能否发生,其根本取决于气态源与凝结汇的竞争。在全球范围内,不同的大气环境下均观测到了新粒子生成现象的发生,但其生成、增长特征以及影响该过程的物理化学过程均存在差异。沿海地区
学位
现代化矿山开采涉及到许多机械设备,具有成本高、复杂结构等特点,设备摩擦问题得到广泛关注。因此,加强矿山开采设备维修保养工作,成为当前行业研究的重要内容之一。在此背景下,阐述了合理润滑技术,而后分析了矿山机械维修中合理润滑技术存在的问题,最后提出了选择润滑材料、更新润滑技术与矿山机械设备等应用技术。
期刊
随着居民饲养的宠物不断增多,每年病死的宠物数量也不断攀升。病死宠物尸体如处理不当,会增加动物疫病传播风险,危及公共卫生安全。为对病死宠物无害化处理有客观的认识,科学对待,该文基于现阶段病死宠物无害化处理现状及存在的问题,简要分析开展工作的对策。
期刊
飞行时间质谱仪(TOFMS)检测质量范围宽,灵敏度和分辨率高,可在较短时间获取全部质量数范围的所有谱图信息。便携式质谱仪器已被广泛地应用于包括大气环境快速监测,化工产品过程实时监控、临床医学、工业设施检漏在内的很多领域。本文工作研制了一台基于真空紫外光(VUV)电离的便携式TOFMS,优化并评价了实验室自研的便携式TOFMS的性能。该仪器尺寸为400×340×250 mm,重17 kg,检测质量范
学位
大气细颗粒物(Fine Particulate Matter,PM2.5)作为当前最重要的大气污染物之一,能够对人体健康、辐射平衡和全球气候产生深远影响。沿海地区是位于陆地和海洋之间的特殊地带,大气颗粒物的化学组分和光学特性因受到多种污染源的相互作用而极具独特性和复杂性。然而,当前对沿海地区PM2.5研究的不足阻碍了对气溶胶组分、理化特性及源汇机制的全面认识,难以准确评价大气气溶胶的环境和气候效应
学位