磁性软体机器人动态仿真及强化学习控制研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:oliveloveyou6
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于磁场驱动的磁性软体机器人技术具有控制精度高、非接触控制和高灵活度、高鲁棒性等显著优势,已成为软体机器人领域的研究前沿和热点,在医疗诊断和仿生等领域展现出广泛的应用前景。然而,目前磁性软体机器人设计主要是基于力和力矩平衡理论推导以及人工干预的试错启发式方法,缺乏统一的分析框架。为解决上述问题,本文以条状磁性软体机器人为例,结合数值分析和实验研究,提出基于图形学仿真和强化学习控制的磁性软体机器人智能设计方法,实现了复杂电磁驱动参数的非人工干预逆问题求解。相关研究和预期成果为实现磁性软体机器人动力学行为的快速分析及电磁参数的高效设计提供了有效途径,具有一定的理论研究意义和实际应用价值。在智能设计方法的数值模型开发层面,基于Cossrat杆模型,在原始模型的基础之上引入磁力矩,使模型能够对磁场与磁性材料的交互作用进行模拟;并引入一个简单易用的、基于结点相对速度的数值阻尼模型以模拟实际软体材料的强耗散特性。基于以上数值模型,构建适用于条状磁性软体机器人的二维形变及运动的图形学仿真环境。为验证模型模拟形变结果的有效性,使用实验和有限元仿真与该仿真环境得到的结果进行了对比,三者呈现出较好的相符性。在智能设计方法的强化学习控制层面,基于该动态仿真环境,对磁性软体机器人的运动过程进行特征分析以及提取,以设计出有效的强化学习状态量,提供给强化学习智能体所需的充足而不冗余的学习信息。同时,设计了简单的奖励函数和易于实施的行动变量,并使用TD3算法对不同场景下的移动任务进行学习及控制,使得不同充磁条件下的磁性软体机器人在不同磁场幅值限度的条件下均学会了前进步态。为证明学习结果的有效性,将训练得到的磁场波形直接应用于实物磁性软体机器人进行验证。结果表明训练出的磁场控制策略具备较强适应性,能够在不同磁化和磁场条件下生成有效驱动策略,具有较强的实用价值。
其他文献
<正>新型冠状病毒肺炎(简称新冠肺炎)一旦由重型进展为危重型其死亡率明显升高,而老年患者的死亡率更高[1]。俯卧位通气已经成为重症新冠肺炎患者治疗的重要组成部分之一。适时恰当、合理运用俯卧位通气治疗能够降低重型和危重型新冠肺炎患者的病死率[2、3]。近期我科对1例老年重型新冠肺炎患者实施俯卧位通气治疗效果明显,成功挽救了患者的生命。现将该患者的护理过程和应用体会报道如下。
期刊
三电平中点箝位型(Neutral Point Clamped,NPC)逆变器相比于两电平逆变器,电流输出质量高,开关管电压应力小,在光伏发电中得到了广泛应用。然而,NPC逆变器应用在光伏系统中仍会存在一些问题。首先,NPC逆变器在运行过程中直流侧中点电位会出现不平衡,引起电流的谐波增加和开关管的应力不均。另一方面,三电平逆变器的高频共模电压将会通过光伏电池板的对地电容形成漏电流,危害人身安全和系统
学位
高效率、高性能、低成本是电力电子变换器永远追求的目标。在高压大功率应用领域中,这些目标的实现难度很大,但需求更为迫切。提高开关频率是改善电力电子变换器性能的重要途径,但高压大电流开关管的开关频率难以提高,使得两电平拓扑结构在中高压应用领域中难以满足高性能的需求。引入多电平技术是提高高压大功率变换器性能的有效解决方案。本文以双有源桥(dual active bridge,DAB)DC/DC变换器的多
学位
XRAM型脉冲功率电源具有电气性能好、拓展性强等特点,是电感储能型脉冲功率电源的主流方案之一。针对目前应用于电磁发射的电感储能型脉冲功率电源的发射效率较低、储能密度不够高等问题,本文开展了相关研究。针对XRAM电源已有的拓扑结构中使用器件较多的状况,本文提出了改进方案,使用单台电容器代替传统XRAM拓扑中分散在各级的若干台电容器,减少了回路的器件数量,降低了拓扑的复杂程度。增加了能量回收支路,能够
学位
燃煤电站是细颗粒及痕量元素的主要排放源之一,对人类健康和生态系统造成了潜在风险。异相凝并吸附剂可将气态痕量元素捕集至颗粒上,同时细颗粒也会在凝并剂作用下成长为大颗粒,随后进入除尘器,实现细颗粒及有害痕量元素的高效协同脱除。首先,基于Fluent软件模拟异相凝并吸附剂喷入前后烟道流场参数变化。凝并后,除尘器入口、出口及脱硫塔出口气态痕量元素浓度均明显下降。在除尘器入口处,气态铬、砷、铅的凝并效率分别
学位
随着第五代(5G,Fifth Generation)移动通信系统开始商业部署,全球移动数据流量呈现出指数增长的趋势,海量的数据处理会导致大量的能源消耗和温室气体排放,加剧全球变暖。为了降低数字通信系统能源消耗,当前芯片采用缩短制程,减少所含电子数,降低供电电压等方式来实现低能耗。但是随着晶体管的栅极尺寸越来越接近介观尺度,传统分析方法已无法精确分析未来能耗水平接近兰道尔极限时的晶体管非平衡信息处理
学位
<正>习近平总书记在党的二十大报告中,深刻阐释了新时代坚持和发展中国特色社会主义的一系列重大理论和实践问题,为我们描绘了全面建设社会主义现代化国家、全面推进中华民族伟大复兴的宏伟蓝图,为新时代新征程党和国家事业发展、实现第二个百年奋斗目标指明了前进方向、确立了行动指南。党的二十大报告是党团结带领全国各族人民夺取习近平新时代中国特色社会主义新胜利的政治宣言和行动纲领,是一篇马克思主义的纲领性文献,更
期刊
生活化教学是初中物理教学期间常用的教学手段,主要通过引入生活情境、调动学生生活经验来帮助学生理解物理知识,使学生能够从生活出发学习物理知识,将物理学习和生活实践结合起来。通过生活化教学可以实现学生学习能力和实践能力的发展,也可以促进学生物理素养的形成。文章从物理学科的生活化教学出发,分析这一教学模式的理论基础,并且针对如何推进这一教学模式在初中物理授课中的应用进行探讨。
期刊
随着现代社会的快速发展,氢能因其清洁环保和储量丰富成为可取代传统化石能源的新能源之一。以氢为燃料的质子交换膜燃料电池(PEMFC)具有功率密度高、工作温度低、环境友好等优点,然而其存在的可靠性差及寿命短等问题制约商业化发展。为了改善这些问题就需对电池运行中出现的故障进行及时的诊断。与需要建立复杂模型的基于模型的故障诊断方法相比,随着检测存储设备以及机器学习算法的快速发展,基于数据驱动的故障诊断方法
学位
伴随着在我国国民素质教育的不断发展下,人们越来越重视教育质量及水平。基于此,本文通过对初中物理教学过程中践行陶行知的教育思想进行了详细介绍,通过著名教育家陶行知先生的教育思想应用于在初中物理教育教学中,由此可体现出我国初中教育的高质量水平,为推动我国教育事业的宏伟发展奠定了扎实的基石。
会议