基于多智能体深度强化学习的柔性车间作业排程算法和系统设计

来源 :南京大学 | 被引量 : 0次 | 上传用户:hikerqw2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在小批量定制化的生产模式下,柔性车间作业排程对工厂的产能起到决定性作用。经典的数学方法缺乏可扩展性,基于演化算法的新方法代价高昂,依赖人工排程又容易出错,因此本工作设计了一种基于多智能体深度强化学习算法的柔性车间作业排程系统,以适应更广泛的大规模现实应用场景。具体工作如下:1.本工作将柔性车间作业排程形式化为多智能体马尔科夫决策,将车间中并行工作的设备抽象为智能体,以此来刻画柔性车间作业排程过程。从而,本工作建立了使用强化学习智能体和车间仿真环境交互来求解柔性车间作业排程问题的算法框架。2.本工作针对柔性车间作业排程问题中,排程解优化困难,智能体数量多,作业关系复杂的求解难点,分别设计基于独立学习,平均场和图神经网络的多智能体深度强化学习决策算法。其中,独立学习算法设计并实现了将两种主流单智能体深度方法扩展到柔性车间作业排程问题的有效算法框架,多分类平均场算法借助平均场理论和设备的自动聚类算法加强了智能体的协作能力,图神经网络算法通过学习问题中作业之间的关系和订单的重要性提高了智能体从不同订单的作业中作出选择的能力。本工作在大量实验中验证了方法的高效性和有效性。3.以马尔科夫决策建模和基于强化学习的算法为核心技术,本工作面向制造业从业者设计并提出了一个通用的柔性车间作业排程软件系统,该系统通过分离重计算模块形成独立的求解器子系统,具有高响应和可扩展的特性,同时为研究者们提供一个能做更为深入算法研究的开放式平台。
其他文献
近年来,得益于深度学习的飞速发展,计算机视觉领域取得了许多令人瞩目的成果,甚至在某些特定的任务场景下计算机已经超越了人类的能力。但是,基于深度学习的方法往往需要大量的数据,而收集并标注这些数据不仅需要高昂的人力物力成本,还面临着各种各样的隐私风险。与之相反,人类可以从少量的数据中学习到新的知识,并将其泛化到不同的领域。因此,如何仿照人类的学习过程,即从少量数据中学习到足够多的知识,吸引到越来越多的
航空发动机等工业旋转机械为提高效率,转速越来越高,载荷日益复杂。因此,对设备各个旋转支承部件的要求也越来越高。滚珠轴承作为旋转系统常用支承部件,其裂纹、剥落和变形等故障会使转子系统产生较大振动,进而给机器的正常运行带来更大的安全隐患。因此,对故障轴承和故障轴承-转子系统动力学特性的研究,也成为转子动力学研究领域中一个重要的课题。这个领域的研究不仅对轴承设计和轴承故障预诊断有重要的意义,同时也对高转
学位
学位
对高速公路信息化建设现状和高速公路大数据的应用现状进行了研究和分析,指出了当前高速公路数据应用方面存在的问题,提出了智慧高速大数据运营分析平台建设的需求,并对平台主要功能进行了设计。
“流变”一词来源于古希腊哲学家Heractitus所说的“παγταρ?γ”,意思是万物皆流。土体的流变性能能直接影响到支挡结构的长期受力和变形性能。本文通过对前人研究进行总结,并在研究考虑土体流变性能的单排支挡结构力学性能的基础上,建立了考虑土体流变性能的三排桩支挡结构二维有限元模型,结合支挡结构的受力特性,对三排桩支挡结构的内力与变形进行了全面的分析计算,并通过正交试验研究了土体流变材料参数、
以黑芝麻粉、蜂蜜、药食同源中药粉(酸枣仁、茯苓、黄精、百合)为原料,通过混料试验设计,利用模糊数学感官评价法,建立黑芝麻粉、中药粉、蜂蜜与感官评分之间的回归模型,研究黑芝麻复合蜜丸的加工工艺。结果表明,黑芝麻复合蜜丸的最优配方为黑芝麻粉添加量47.9%、中药粉添加量10%、蜂蜜添加量42.1%。在此条件下制出的黑芝麻复合蜜丸,甜度适宜,软硬适中,黑芝麻香味突出,同时又与中药风味协调。
为明确“南天黄”香蕉果实的催熟浓度、温度等条件,为生产上催熟提供技术参考。以“南天黄”香蕉果实为试材,比较1、0.8、0.5 g/L乙烯利处理后,14、18、22℃贮藏对果实后熟进程、果皮色度、果肉硬度和可溶性固形物含量等变化的影响。结果表明,随着乙烯利浓度及贮藏温度提高,香蕉果实色差H值和硬度下降速度及可溶性糖含量增加速度加快,后熟进程加快。贮藏温度对果实后熟品质的影响明显,14、18和22℃贮
利用筛选获得的18对具有双亲差异且在各世代群体中扩增效果稳定的SSR引物对芝麻RIL构建过程中的F1~F10群体的遗传差异进行跟踪检测。结果表明,随着RIL群体的不断加代,群体的DNA多态性带比率从F2的87.54%不断下降到F10的3.33%,杂合位点率从F1的100%不断下降到F10的0.19%,遗传相似性系数从F2的0.6669不断增加到F10的0.9908,遗传距离从F2的0.2592不断
全国人民代表大会常务委员会:我代表最高人民法院,对《关于授权最高人民法院在该院和部分地区开展四级法院审级职能定位改革试点工作的决定(草案)》作说明。为贯彻落实党中央关于完善四级法院审级职能定位改革的决策部署,最高人民法院经认真调研论证,在充分征求并吸收中央政法委、中央编办、全国人大监察司法委、全国人大常委会法工委、最高人民检察院、司法部等单位意见基础上,
期刊