基于强化学习的装配式预制件生产调度多目标优化算法研究

被引量 : 0次 | 上传用户:pangyaoyu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
《国务院办公厅关于大力发展装配式建筑的指导意见》指出,发展装配式建筑是建造方式的重大变革。预制构件是装配式建筑的关键部件,其生产调度过程是一个多变量、多约束、多目标的优化问题,已成为制约施工进度、生产成本、节能减碳的关键因素。目前相关文献主要以流水车间为模型开展预制构件生产调度研究,无法充分表达生产加工复杂柔性特征,造成大量机床空闲,亟待融合问题特性的高性能优化方法。本文充分考虑预制构件生产复杂约束和目标特点,包括分布式、分时电价、机床加工速度、起重机搬运、分组加工、生产运输一体化等,以柔性作业车间调度为基础建立了混合整数规划模型。基于问题特性,设计了多种全局和局部搜索算子。针对不同生产场景,提出了不同结构的深度强化学习算法。将深度强化学习和进化算法有机融合,构建了高效的预制构件生产运输一体化算法仿真平台。本文的主要研究内容如下。(1)针对预制构件生产调度问题建模,分析了部分机床的多个工件同时加工、部分工序加工时间较长等约束,以最大完工时间和总能耗为目标,同时考虑了多个工厂的预制构件生产分布式调度问题,建立了以柔性作业车间调度为基础的混合整数规划模型,并进行验证。融合了分布估计算法和变邻域搜索的混合算法,实验结果表明,该混合算法既提高了寻优过程的探索能力,也提高了算法的挖掘能力。(2)针对实际预制构件生产过程中的复杂多约束调度问题,考虑了分时电价、机床加工速度等关键约束,同时考虑了机床的准备阶段和空闲阶段,提出了深度Q网络(DQN)求解模型,模型的状态特征详细刻画了任一调度过程上的系统属性,并且基于问题特性设计了多种动作,能够有效优化目标值。(3)针对建筑预制构件在加工过程中需要起重机搬运的特征,需要考虑起重机搬运的各个状态所花费的时间和能耗。在这种加工情景下,同时考虑机床的准备阶段、空闲阶段和加工阶段,整个预制构件的生产过程属于一个复杂约束的优化问题,在此基础上同时对最大完工时间和总能耗进行优化,并且将分布估计算法和DQN模型相融合,进一步提升算法的求解性能。(4)针对多工厂分组预制构件生产调度问题,考虑工件存在分组加工的限制的约束。在预制构件分组加工的情况下,同组的预制构件需要在同一车间内加工完成,且加工时所需的机床状态相同,无需机床的准备时间,不同组的预制构件接续加工时需要考虑准备时间。针对分布式预制构件的组调度问题,设计了DQN组合网络结构,将单工厂和多工厂的优化策略分别用两个网络管理,再用一个网络控制两种策略的选择,此外设计了迭代后的精炼步骤进一步提高优化效果。(5)针对多工厂预制构件从生产到施工现场运输的全过程,同时考虑了预制构件的生产调度和运输调度过程,并建立了相应的数学模型。利用改进的DQN模型求解该综合性应用问题,对整个加工调度和运输过程进行一体化优化,具有较强的现实意义。通过对数学模型的验证实验和与其他算法的对比实验,证明了本文提出的DQN模型能够满足多工厂预制构件生产和运输一体化优化的需求。
其他文献
为寻求益智类游戏"沙漠掘金"在多人参与下的游戏策略,针对具体的游戏规则进行了深入的分析,分别提出了基于完全信息静态博弈与完全信息动态博弈的游戏策略。首先,通过简化游戏规则将其转变为一个非合作博弈问题。其次,考虑单人游戏中的最优化问题,分析单人游戏的策略并在此基础上采用博弈论的方法对多人游戏的情况进行求解。最后,针对第一关,满足完全信息静态博弈的情况,模拟玩家行动,得出博弈支付矩阵,通过混合策略纳什
期刊
金融危机后,各国对美元一家独大的货币体系产生质疑,急于构建多元化的货币格局,这也为人民币的国际化提供了良机。2009年我国正式启动跨境贸易人民币结算试点,标志着人民币国际化正式启动。随着经济的发展与综合实力的不断提高,人民币在当前国际货币体系中发挥着越来越重要的作用,国际化进程也在稳步推进。2021年底,人民币国际化指数(RII)达到5.05,2022年人民币在SDR货币篮子中的权重从10.92%
学位
在当前全球经济下行的大环境背景下,消费已经成为我国GDP的重要贡献力量。金融科技的快速发展,对居民的消费行为以及消费市场均造成了深远的影响,这些改变加速了消费结构的调整。因此,助力金融科技的发展,是提高居民消费水平的重要方式,也是引导消费结构改善的重要环节。首先,本文对金融科技及居民消费的相关理论进行了详细阐述。其次,本文根据金融科技对消费结构可能产生的影响进行合理推理并提出假设,同时选取我国20
学位
《西游记》中唐僧与孙悟空的师徒关系形成历经波折,二人从一开始的师道尊严到最后的相互扶持依赖,师徒关系正式确立下来。这一转变过程体现出唐僧与孙悟空之间的师承徒义、共存共荣,不仅使取经任务得以完成,还丰富了人物形象,构建了新型的师徒关系,创造了融洽和谐的氛围。
期刊
当今时代,信息化浪潮正在迅速席卷全球,从工业经济到信息经济,信息化已经逐渐成为促进全球经济与社会发展的重要因素,推动金融行业等各个领域加速向数字化迈进。金融科技通过大数据、云计算、区块链、人工智能等技术提升了金融服务的效率,也在改变着居民的消费习惯和消费理念。在“双循环”发展模式下,居民消费已逐步成为拉动国民经济发展的重要力量,扩大内需是促进新发展模式的关键,而目前我国的居民消费水平依然偏低,因此
学位
目的:非酒精性脂肪性肝病(Non-Alcoholic Fatty Liver Disease,NAFLD)已成为世界上最普遍的慢性肝病,其发病率逐年升高。在NAFLD的发病机制中,“多重打击”理论是被广泛接受的观点,即脂肪变性,脂质毒性和炎症。该疾病始于肝脏中甘油三酯的过度积累,从而导致肝细胞发生损伤,进而造成脂肪变性和炎症等。因此,抑制肝脏中的脂质积聚是治疗脂肪肝的有效策略。P38γ是P38丝裂
学位
近年来,随着轨道交通系统的迅速发展,对其牵引供电系统安全稳定运行的要求日趋严格。牵引变压器由于负责电压变换和电能分配的重要功能,是轨道交通牵引供电系统的关键设备,因此变压器工况的有效诊断监测对整个轨道交通系统的安全可靠运行具有重要意义。变压器由于种类多、内部结构复杂和运行工况多样等特点,对其进行异常检测较为困难,而基于噪声分析的变压器故障智能诊断是一种简单有效的非侵入式监测方法,其不会影响变压器的
学位
“双碳”背景下,新能源汽车充电负荷的持续增长对电网安全稳定运行的影响愈发显著。针对现有的以用户侧为出发点的预测方法存在较多的不确定性、实用性不足的情况,从电网侧的角度,提出了将粒子群优化(PSO)算法与最小二乘支持向量机(LSSVM)应用于充电负荷预测。通过分析影响充电负荷因素的相关程度系数,选择合适的特征量作为输入量,并运用PSO算法优化LSSVM模型参数,建立了基于PSO-LSSVM的充电负荷
期刊
天然气的应用和发展对我国实现“双碳”目标意义重大。随着我国燃气市场规模的扩大,燃气供需变化越来越复杂,燃气负荷预测技术持续受到关注。系统介绍燃气负荷预测方法中常用的数理统计预测法、人工智能预测法及组合预测法,总结燃气负荷预测技术的发展现状及应用特点,介绍国内外燃气负荷预测软件的应用,探讨并展望目前我国燃气负荷预测技术在发展中存在的问题及未来发展方向。
期刊
当前的综合能源系统(IES)负荷预测方法几乎都是单一的数据驱动方法,忽略了IES中的能量耦合关系。此外,在现有的研究中,数据驱动方法的训练数据主要集中于历史负荷、气象等影响因素,较少考虑可再生能源出力以及不同能源供应给IES负荷预测结果带来的影响。针对上述问题,本文提出一种知识-数据混合驱动的IES多元负荷预测方法。该方法首先通过解析模型对IES中的能量耦合特性知识进行描述,并利用该知识模型对原始
期刊