基于逆向强化学习的集装箱堆场多贝位装船发箱智能决策

来源 :武汉理工大学 | 被引量 : 0次 | 上传用户:kkai365
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
建设现代化综合交通体系是实现交通强国战略的重要支撑,作为交通运输网络的重要结点,集装箱港口应实现智能监管、智能决策与智能作业,不断提高集装箱装卸效率,增强自身竞争力为实现交通强国做贡献。堆场出口箱装船发箱与岸边装船作业相关联,直接影响集装箱船舶靠泊时间,开展堆场装船发箱智能优化决策,是提升集装箱港口竞争力的重要突破口之一。论文以常见的顺岸式集装箱堆场为对象,以最小化装船时堆场翻箱次数和水平搬运车辆岸边等待时间为目标,研究集装箱堆场多贝位装船发箱决策问题,保障岸边装船作业连贯性和装船作业效率。主要工作有:(1)根据堆场装船发箱作业实际,确定堆场发箱、岸边装船约束。将堆场装船发箱决策过程分为两个决策阶段,首先进行堆场多贝位发箱顺序决策,基于此展开装船时堆场贝内翻箱决策。界定堆场多贝位装船发箱决策并分析其影响,为进一步研究堆场多贝位装船发箱决策问题奠定基础。(2)在堆场装船发箱顺序已知时,构建基于马尔科夫决策过程的装船时堆场贝内翻箱模型。设计基于逆向强化学习的装船时堆场贝内翻箱算法,与提出的基于随机决策和基于规则决策的算法对比。算法验证发现,由于可挖掘应用专家翻箱方案中隐含决策经验,逆向强化学习算法限制连续翻箱次数的优势明显,求解时间因涉及多次循环而偏长,但在可接受范围。(3)以堆场装船发箱顺序为决策变量,引入岸边装船作业不悬空约束,将装船时堆场贝内翻箱模型扩展为堆场多贝位装船发箱决策模型。将逆向强化学习算法作为子算法,整合基于深度优先搜索的堆场多贝位发箱顺序算法,设计深度优先搜索-逆向强化学习智能决策算法。算例分析表明,深度优先搜索-逆向强化学习智能决策算法可有效求解堆场多贝位装船发箱决策问题,在确定堆场多贝位装船发箱顺序的同时,制定较优的装船时堆场贝内翻箱方案。
其他文献
疲劳性能是碳纤维增强塑料(Carbon Fiber Reinforced Plastics,CFRP)的一项重要性能指标,在一定程度上决定了其在长期服役过程中的安全性和可靠性。CFRP在服役环境下的疲劳性能通常需要长期的、高成本的实验才能得到,并且其在服役环境下损伤机理研究不深入、微观结构损伤与性能退化关联性不清等问题依旧存在。为了可以通过快速、低成本的方法得到CFRP在不同温湿度环境下的疲劳性能
学位
将橡胶集料等体积替换部分天然骨料不仅可以改善混凝土材料自重大、脆性等缺点,而且能够将废弃物重新利用,为橡胶的处理增添了新的途径。但是随着橡胶掺量的增加,橡胶集料混凝土的抗压强度、抗折强度和弹性模量明显下降,这限制了橡胶集料混凝土在土木工程中的应用。受钢管混凝土组合构件的启发,将橡胶集料混凝土加入钢管内形成钢管橡胶集料混凝土组合构件,其强度和延性会得到明显提升。因橡胶集料混凝土与普通混凝土的力学性能
学位
超磁致伸缩作动器(GMA)是以超磁致伸缩材料(GMM)作为驱动元件的高度集成化的作动器,其性能影响因素多,理论分析复杂。受制于GMM的材料特性和现有作动器定内阻设计的影响,效率问题长期以来制约着高性能GMA的发展。本文提出一种作动器机械内阻抗连续可调机制及其效率提升方法,以超磁致伸缩材料(牌号Terfenol-D)为驱动元件,提出了一种GMA的设计方案,通过调控Terfenol-D的ΔE效应对作动
学位
Mg2Si1-xSnx基热电材料具有原料蕴藏丰富、价格低廉、无毒无污染等优点,是热电材料界广泛关注的一类中温区(500~900 K)热电材料。然而,该材料体系在实现商业化应用过程中仍然面临着一些问题和挑战,其中包括:由于Mg元素较大的反应活性和较高的饱和蒸气压导致的材料制备工艺复杂、耗时长的问题;Mg2Si1-xSnx材料断裂韧性和弯曲强度较低的问题。本论文针对上述两个问题,采用一次固相结合热压的
学位
抓斗门座起重机广泛应用于港口和露天堆料场,在散货装卸中起着重要的作用,钢丝绳及抓斗摆动会严重影响其工作效率,因此对其进行吊重摆动控制显得尤为重要。本文以抓斗门座起重机吊重摆动系统为主要研究对象,考虑抓斗摆动和绳长变化建立其动力学模型,提出了一种基于双模态模型的改进ZV输入整形算法,对钢丝绳及抓斗摆动控制进行了MATLAB数值仿真以及ADAMS虚拟样机仿真验证,研究工作主要从以下几个方面展开:(1)
学位
本文针对基于碳电极的无空穴传输层钙钛矿光电池中空穴输运性能受限、钙钛矿/碳电极界面的载流子复合较多以及钙钛矿表面缺陷密度较大等问题,提出使用能级可简易调控且具有自p型掺杂效应的锡掺杂钙钛矿量子点作为界面层来对钙钛矿表面进行优化,并研究量子点不同掺Sn量对钙钛矿光电池性能的影响。论文的主要研究成果如下:(1)基于CH3NH3Pb I3(MAPb I3)钙钛矿/致密Ti O2p-n结构建了钙钛矿光电池
学位
集沙仪是研究风沙运动规律,观测风沙流结构的重要测量仪器。国内外对于集沙仪的研究主要集中在风洞试验与野外试验。随着气固两相流研究与数值模拟方法的发展,本文针对集沙仪在气固两相流研究方面的空缺,基于计算流体动力学(Computational Fluid Dynamics,CFD)和离散单元法(Discrete Element Method,DEM)耦合的方法,以自动连续称重式集沙仪为研究对象,对集沙仪
学位
粮食等散装物料转运过程中,极易造成粉尘污染危害环境和人员安全。目前,主要粉尘治理方法为喷水、喷雾、负压抽尘等主动除尘,但可能造成不必要的能源消耗和二次污染。为提升散料转运过程绿色化水平,需要进一步发展依靠颗粒流动性抑制粉尘产生及扩散的被动抑尘方法。本文提出一种改变漏斗内部结构以抑制粉尘产生及扩散的导料漏斗被动抑尘方法,并通过CFD-DEM耦合数值仿真和实验研究散料转运过程颗粒和气流运动分布以及产尘
学位
隧道爆破开挖的方式因为成本低、效率高,并且能适应不同的断面形式而在隧道施工过程中广泛采用。隧道掌子面炮眼的设计以及定位是爆破过程中的一项重要工序。目前大多数隧道的炮眼设计是根据围岩等级和断面尺寸的不同进行设计,而围岩等级由勘探信息获得,在实际施工过程中往往出现分类不准的问题,导致炮眼设计不科学,爆破效果不理想。在炮眼定位的环节中,普遍采用人工的方式对炮眼进行标记,首先对关键点位进行测量随后进行标记
学位
HK型中压低速大扭矩叶片式液压马达是IHI(日本石川岛播磨公司)生产的众多叶片式液压马达中的一种类型。该类型叶片式液压马达能根据负载大小自动调节其工作转速,且换向频率较高,能有效降低操作人员的劳动强度,因而,在采用液压绞车的起重运输机械及锚泊机械等领域得到了广泛应用。为保证所生产的HK型叶片式液压马达具有性能稳定、可靠性高和使用寿命长等特点,本文采用串并联液压补偿方式建立符合部颁标准(JB∕T10
学位