基于强化学习的挖掘机时间最优轨迹规划

来源 :控制与决策 | 被引量 : 0次 | 上传用户:cynthia0737
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对挖掘机的自主作业场景,提出了基于强化学习的时间最优轨迹规划方法.该方法搭建仿真环境用于产生数据,以动臂、斗杆和铲斗关节的角度、角速度为状态观测变量,以各个关节的角加速度值为动作信息,通过状态观测信息实现仿真环境与自主学习算法的交互,设计以动臂、斗杆和铲斗关节运动是否超出允许范围、完成任务总时间和目标相对距离为奖励函数对策略网络参数进行训练,最终利用改进的近端策略优化算法(Proximal Policy Optimization,PPO)实现了挖掘机的时间最优轨迹规划.与此同时,与不同连续动作空间的强化学习算法进行对比,实验结果表明,本文提出的优化算法效率更高,收敛速度更快,作业轨迹更平滑,可有效避免各个关节受到较大冲击,有助于挖掘机高效、平稳的作业.
其他文献
以天坑内部-边缘-外部森林植物群落为研究对象,通过调查植物的群落结构、叶功能性状,探究天坑内外森林植物群落叶功能性状、物种多样性和功能多样性变化特征及其内在关联,为深入了解负地形森林生态系统的功能和恢复退化喀斯特地区的植被提供一定参考。研究结果如下:(1)比叶面积(198.75 cm~2/g))、叶面积(42.70 cm~2)、叶磷含量(1.70 g/kg)和叶钾含量(10.27 g/kg)在天坑
西方国家在5G技术问题上对中国进行污名化是一系列复杂因素共同作用的结果,其中,权力转移是动力源,意识形态差异是催化剂,政治考虑是加速器。然而,西方国家对中国污名化不仅无助于提升其技术发展水平,反而增加了双方发生战略误判的可能性,导致其国内亚裔民众被疏离,刺激双方民族主义情绪螺旋上升,阻碍5G技术全球治理合作进程。为此,中国需要强化国际话语权,主动设置议程“反”污名化;在与西方国家保持沟通的同时,坚
分枝是辣椒(Capsicum annuum L.)重要的农艺性状之一,不仅影响辣椒产量的多少,也是观赏效果的重要因素。本研究以独杆辣椒(du-1)、簇生朝天椒(S16)及它们的F2代分离群体为材料,构建亲本及F2代辣椒分枝极端混池,利用BSA-seq技术,筛选辣椒分枝性状的QTLs。结果显示,SNP与InDel关联区域取其交集,得到9个与性状相关的候选区域,总长度为21.53 Mb,主要集中在1号
十九大报告明确提出,要加快建立绿色生产和消费的法律制度和政策导向,建立健全绿色低碳循环发展的经济体系。本文根据西双版纳州实际情况,提出了引导发展本地区低碳循环经济的对策建议。
随着电动汽车的日益普及,大容量高续航的电动汽车已逐渐成为市场主流。当前的充电技术水平已不能满足客户在部分场景下的需求,发展大功率充电成为必然趋势。本文从大功率充电需求、法规政策、产业规划、关键技术以及零部件成本等关键要素分析大功率充电趋势。本文预测以2025年为拐点,行业将具备大功率充电规模导入市场的条件,为各OEM市场导入HPC提供参考意见。
<正>11月23日,省人大常委会召开专题研讨会,围绕深入学习贯彻党的二十大精神,研究部署明年常委会立法、监督、讨论决定、代表等工作重点,以及常委会未来五年工作要着力把握的方向。省人大常委会主任黄楚平主持会议并讲话,常委会主任会议成员结合分管工作进行交流发言。黄楚平指出,今年以来,在省委领导下,省人大及其常委会、
期刊
《论语》作为记录孔子及其弟子言行的儒家经典,渗透了孔子的思想精髓,其思想的开创性、整合性与现实性均契合我国当代教育管理理念。我国教育应基于《论语》从宏观到微观、集体到个人对我国教育管理所带来的启示,采取刚柔并济推进教育管理、搭建立体教育管理体系、注重自我进步及专业发展、唤醒学习主体持续动能等策略,从国家、学校、教师、学生四个层面解决当代教育从宏观到微观、集体到个人所存在的问题,进而提升我国教育管理
<正>成都现代服务业与绿色低碳深度融合,推动成都践行新发展理念的公园城市示范区加快建设。作为绿色低碳产业的四大领域之一,绿色低碳服务与光伏、氢能、锂电池有所区别,其与现代服务业深度融合,推动现代服务绿色化发展,满足人们对美好生活的向往,与成都休闲舒适宜居的城市风格完美契合。
期刊
城市体检作为新时期规划建设管理的评估制度,体现出应对城市病等突出问题的治理逻辑转变,是实现高质量发展的重要技术手段和管理工具。临空经济区作为一种特殊功能区类型,其所具备的战略性、引领性与复杂性决定了很难将其作为一般性的城市空间开展体检工作,特色性指标的选取尤为重要。该文基于西咸新区空港新城体检实践,结合临空经济区的发展逻辑与特色机制,从战略职能、产业动能、低碳宜居和社会发展4个维度,新增8个模块3