【摘 要】
：
针对现有磁悬浮控制系统设计方法依赖动力学模型的问题,利用Q网络强化学习方法,在不依赖系统模型的条件下,训练得到基于Q网络的自学习控制器;基于系统运动方向设计奖励函数,提高了强化学习训练的收敛速度;提出了基于系统加权平均状态(weighted average states,WAS)的训练算法,自适应调节每回合的训练步数,以提高控制网络的有效控制范围。数值仿真结果表明,基于WAS算法的Q网络自学习控制器能够实现磁悬浮系统的稳定控制,对比普通的强化学习算法,能够实现系统更大范围的稳定控制。
【机 构】
：
哈尔滨工业大学控制理论与制导技术研究中心,DepartmentofMechanicalandAerospaceEngineering
【基金项目】
：
国家自然科学基金(61304006)。
论文部分内容阅读
针对现有磁悬浮控制系统设计方法依赖动力学模型的问题,利用Q网络强化学习方法,在不依赖系统模型的条件下,训练得到基于Q网络的自学习控制器;基于系统运动方向设计奖励函数,提高了强化学习训练的收敛速度;提出了基于系统加权平均状态(weighted average states,WAS)的训练算法,自适应调节每回合的训练步数,以提高控制网络的有效控制范围。数值仿真结果表明,基于WAS算法的Q网络自学习控制器能够实现磁悬浮系统的稳定控制,对比普通的强化学习算法,能够实现系统更大范围的稳定控制。
其他文献
我国在城市规划建设的过程中,对地下空间的开发和利用力度越来越高,而在某些地层中地下水相对较高,在地下水浮力作用下将导致地下室结构出现破坏现象,危害建筑物的整体安全。设置抗浮锚杆可以解决地下水浮力引起的破坏现象。介绍了该项目的工程概况及施工技术,结合项目实际情况,从设计简述、施工方法和特点、施工工艺、技术要求、过程控制、质量要求等方面,提出了抗浮锚杆特殊过程控制和质量保证关键控制。
近年来,国家倡导绿色、环保的发展理念,作为传统建筑行业更应积极响应国家号召,实现技术理念与应用研究上的突破。因此,围绕建筑行业中节能绿色应用技术的重要意义、现存问题及应对措施等方面,对应用技术进行深入剖析。
在论述深基坑支护技术基本情况以及重要性的基础上,具体阐释了几种相关施工技术,探究了深基坑技术在岩土工程实施过程中常见的问题,在此基础上提出了改进深基坑支技术的有效措施,以期为岩土工程的施工技术提供实践借鉴。
BIM技术具有可视化、模拟性的特点,可在项目决策、施工图纸设计、施工安全管理和施工质量管理等多个方面进行应用。通过对BIM技术的应用现状分析,指出BIM技术应用是未来建筑领域发展的趋势,可以有效实现施工管理智能化,促进多方面的协调发展。全面应用BIM技术,不断扩大应用范围,可以实现各个部分的有效协调,更加细化建筑工程项目环节。
地理信息系统技术可以应用于其他技术领域,称为GIS技术,同时可以完成空间数据分析和处理任务。在地质和矿物勘探中使用该技术可以提高矿物勘探的效率,并促进勘探工作的成功完成。因此,就地理信息系统在地质矿产勘查中的应用展开了讨论和研究,希望将这种技术应用到更广泛的领域。
机电设备安装施工是建筑工程中的重要环节之一,它不仅包括工业、民用、公用工程中的各类设备,还包括给排水、电气、采暖、通风、消防、通信及自动化控制系统的安装。这一施工环节的有效开展,有利于增强建筑工程的整体功能。但是,在具体的建筑机电设备安装施工过程中,还存在不少问题,导致安装施工质量受到不良影响,难以发挥出机电设备的作用。基于此,相关施工单位要充分了解机电设备安装施工中的常见问题,而且要针对有关问题进行具体分析,结合分析结果,制定出科学有效的解决措施,借此提高建筑机电设备的安装施工质量。
供应链中的库存费用占用了企业生产成本的较大比重,“牛鞭效应”的最典型表现就是信息的放大扭曲和时间的滞后导致供应链上下游的信息不匹配。文章以TC不锈钢公司为例,针对供应链中的“牛鞭效应”采用移动平均法和指数平滑法对库存需求进行预测,从中选择与实际需求量误差最小的方法,同时建议企业采用建立内部库存联盟、建立现代化信息管理系统等措施减弱“牛鞭效应”带来的影响,旨在减少库存占用资金、降低企业管理风险。
随着大数据、人工智能以及5G等现代信息技术的迅猛发展,数字经济给人类的生产和生活方式带来了重大而深远的影响。于税务系统而言,大数据等信息技术的快速发展必然给税收管理带来诸多挑战,同时也为税收现代化建设提供了新的发展机遇。文章以大数据为研究背景,阐述了大数据环境下税收风险管理面临的挑战,提出了大数据环境下强化税收风险管理的对策和建议,以期提高税务部门的“治理”能力。
道路工程制图是高职院校道路桥梁工程技术专业的专业基础必修课,主要研究工程图样的形成、绘制与识读规律的一门学科,是工程技术人员表达设计意图、交流技术思想、指导生产施工等必须具备的基本知识和技能。通过讲解制图的基本标准,告诫学生做人做事要遵守规则,切不可随心所欲;通过讲解形体的三面投影,培养学生多角度观察问题的能力,切不可片面的看待问题;通过讲解剖面图的形成与绘制,告诫学生看问题不能只看表面现象,要透过现象看本质,培养学生独立分析问题的能力。通过不断探索和寻找将思政要素融入教学过程的方法和策略,真正做到将思政
分析“健康中国”建设与推动经济社会高质量发展之间的协调联动关系,建立健康领域与经济发展之间相互促进、良性循环的系统,充分发挥“健康中国”建设在增进全民健康福利、拉动内需、鼓励创业、提供就业机会、推动经济结构调整、实现经济发展动力转换等领域的重要作用。