基于深度强化学习的燃料电池汽车多目标能量管理策略研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:fang82888
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
面对环境污染、全球变暖、石油资源枯竭等问题,新能源汽车成为各大汽车厂商的重点研究对象。随着燃料电池技术发展,燃料电池汽车充分发挥新能源汽车零排放与节能优势,得到了国内外研究者的广泛关注。能量管理策略是具有多能量源燃料电池汽车的核心控制技术,直接决定着整车性能。深度强化学习算法能有效处理多目标能量管理问题,在优化效果、实时性以及自学习等具有显著优势;为此,本文将开展基于深度强化学习的燃料电池汽车多目标能量管理研究,具体研究内容如下:首先,燃料电池汽车动力系统建模研究。搭建整车纵向动力学模型与面向控制的传动部件模型;分析影响动力源耐久性的因素,建立燃料电池退化模型与电池老化模型;阐述全局优化算法-动态规划(Dynamic Programming,DP)基本原理,实现DP求解能量管理问题,分析全局优化策略下各动力源的工作特性。其次,基于深度强化学习的能量管理策略研究。基于强化学习概念与原理,分别阐述深度Q网络(Deep Q-Network,DQN)与深度确定性策略梯度(Deep deterministic policy gradient,DDPG)的基本理论,构建基于深度强化学习的燃料电池汽车能量管理框架;分析UDDS工况下基于DQN与基于DDPG的离线训练结果,将训练完成的策略在线应用于验证驾驶工况,进一步表明所提策略的自适应性。再次,基于软约束演员评论家(Soft actor critic,SAC)的寿命意识能量管理策略研究。阐述SAC算法的基本概念,分析能量管理框架下SAC算法与传统深度强化学习算法的优劣;基于燃料电池退化模型和电池老化模型,构建以氢耗、SOC维持、燃料电池退化以及电池老化为多目标的能量管理优化问题,确定动力源老化与氢耗的折中方案,分析基于SAC的寿命意识能量管理结果,验证拼接工况下所提策略的有效性。最后,计及空调系统协同能量管理研究。基于热力学平衡理论,建立空调系统模型与车舱热负荷模型,搭建计及空调系统的协同能量管理框架,利用SAC算法实现协同能量管理问题的求解;对比分析高温制冷以及低温制热下协同能量管理结果,进一步验证拼接工况下策略的有效性。
其他文献
褶皱夹芯结构具有优异的力学性能,其尺寸的可设计性可以将其应用在各个领域。但特种纸的克重和浸胶量对其力学性能的影响研究较少,故本文从制备工艺、实验表征、有限元模拟方面研究了不同克重的特种纸和不同浸胶量对褶皱夹芯结构力学性能的影响,主要开展以下工作:(1)探索了真空吸附一次成型工艺,通过特种纸纸浆来直接制备V-型褶皱芯子,对芯子的几何尺寸进行了分析,发现因短切纤维在打浆过程中会产生细小的纤维碎片,在真
学位
在疲劳载荷和腐蚀环境等因素的影响下,对重大装备中材料早期损伤的无损检测和评估具有迫切需求。由于非线性超声检测技术对空间尺寸远小于超声波波长的材料微观结构特征有足够的表征灵敏度,对材料早期损伤的评估和检测具有特殊优势,近年来受到极大关注。超声非线性检测技术主要包括高次谐波技术、静态分量技术和混频检测技术等。其中,混频检测技术由于能够对局部损伤进行扫描定位和定量评估、具备较强的抗干扰能力等优点而引起广
学位
当今社会,流行性疾病的频繁发生和自然环境的日益破坏,促使了更多的人开始关注健康问题。随着信息化医疗技术高速发展,如何侦测与管控流行性疾病,建立全社会的智能健康管理系统,已成为国家疾病预防控制中心的重点研究方向。目前,大多的生理参数监测设备都是以医院或家庭为背景而设计的,存在检测对象单一,设备价格昂贵,缺少互联网接入,难以实现区域性检测等问题。鉴于此,本文旨在设计一种能辅助公共卫生机构应对流行性疾病
学位
Ti6Al4V合金由于机械性能好、电化学性质稳定被广泛地应用在航空航天、汽车、生物医学和海洋舰船等领域,在湿热盐环境下,Ti6Al4V合金在电化学作用下发生腐蚀,造成大量的资源浪费。氮化钛涂层具有良好的电化学稳定性和耐磨性能,被广泛地作为耐蚀和耐磨涂层,然而由于氮化钛柱状生长等自身结构缺陷,腐蚀离子会渗透到内部破坏其结构,目前改变氮化钛耐蚀性能的有效方法是添加中间金属层来抑制其柱状生长。因此,本文
学位
固态电解质替代有机液态电解质而发展起来的固态电池是一类新型储能电池,有望从本质上解决传统锂离子/钠离子电池中的安全性问题,同时提高电池能量密度。其中,无机氧化物固态电解质材料具有化学/电化学稳定性好、机械强度高、成本低、载流子唯一、对金属阳极稳定等诸多优点。但是,存在离子电导率低的难题;另外,无机氧化物固态电解质材料通常都需要烧结致密化,在高温烧结过程中,晶粒容易异常长大,探索烧结致密的纳米晶无机
学位
连续碳化硅纤维增强钛基(SiCf/Ti)复合材料兼具高比强度和抗疲劳性等优点,特别在航空发动机工作的中温段(650℃-1000℃)具有广阔的应用前景。真空热压制备过程中界面反应导致的金属间化合物是影响其力学性能的关键。相关的研究主要集中在两方面:一是界面反应层的生长演化问题;另一方面是受界面影响的复合材料的力学性能的问题。前者是生长的动力学问题,后者是力学性能评估问题,两者紧密相关且相互依存。例如
学位
固定弹簧式起落架具有结构简单、可靠性高和维护保养成本低等特点,常用于通用航空飞机的主起落架,固定弹簧式起落架的着陆动态性能研究与优化对通用航空飞机的研发有重要的意义。本文的主要研究对象是固定式管簧起落架。首先建立了起落架管簧支柱和轮胎的有限元模型,并分析了轮胎的下沉量,然后在飞机的最大着陆设计质量下,以不同的下沉速度研究起落架的着陆动态性能,得到起落架在着陆过程中的垂向载荷、侧向载荷、过载和垂向压
学位
环氧树脂是一类具有优异力学性能、尺寸稳定性和耐酸碱等优点的热固性树脂,广泛应用于电子器械、复合材料等领域;然而其不溶不熔的特性使其固化后无法再次加工或重塑,且废弃后难以回收会造成固废污染。类玻璃体高分子具有动态共价键,可再愈合和再修复性。环氧树脂类玻璃体作为一种典型的类玻璃体,除具有极高的力学强度外,还能在高温下能够实现拓扑化结构的重排,被认为是继热固性材料和热塑性材料之外的第三类高分子材料。柔性
学位
自然界中的大帛斑蝶等昆虫通过拍动翅膀而进行飞行,且表现出卓越的飞行能力;在飞行的过程中,它们的翼面都会发生显著的柔性变形,该柔性变形会引起周围流场的结构发生变化,从而对它们的飞行姿态和飞行能力有着重大的影响。近年来,人们对生物飞行的空气动力学机理充满兴趣的同时,也对仿生扑翼微飞行器(Flapping-Wing Micro Aerial Vehicles,FMAV)的开发满怀热情。而翅翼作为FMAV
学位
日常生活中经常发生冲击爆炸问题,其中诸如车祸等有害碰撞严重威胁人们的生命财产安全。薄壁结构作为重要缓冲防护结构,具有诸多优异特性,例如质量轻、成本低、可设计性强等,在航空航天、交通运输等多个领域得到了广泛应用。为避免结构飞溅等二次冲击伤害,传统的薄壁管吸能结构通常需要施加额外的外界约束。因此发展一种可扩展组装、易于拆卸、便于运输的可扩展薄壁自锁吸能结构成为迫切需求。然而,现有自锁结构存在比吸能较低
学位