【摘 要】
：
近年来,深度强化学习在复杂控制任务中取得了令人瞩目的效果,然而由于超参数的高敏感性和收敛性难以保证等原因,严重影响了其对现实问题的适用性.元启发式算法作为一类模拟自然界客观规律的黑盒优化方法,虽然能够有效避免超参数的敏感性,但仍存在无法适应待优化参数量规模巨大和样本使用效率低等问题.针对以上问题,提出融合引力搜索的双延迟深度确定策略梯度方法 （twin delayed deep determini
【基金项目】
：
国家自然科学基金（61772355,61702055,61876217,62176175）； 江苏高校优势学科建设工程；
论文部分内容阅读
近年来,深度强化学习在复杂控制任务中取得了令人瞩目的效果,然而由于超参数的高敏感性和收敛性难以保证等原因,严重影响了其对现实问题的适用性.元启发式算法作为一类模拟自然界客观规律的黑盒优化方法,虽然能够有效避免超参数的敏感性,但仍存在无法适应待优化参数量规模巨大和样本使用效率低等问题.针对以上问题,提出融合引力搜索的双延迟深度确定策略梯度方法 （twin delayed deep deterministic policy gradient based on gravitational search algorithm, GSA-TD3）.该方法融合两类算法的优势:一是凭借梯度优化的方式更新策略,获得更高的样本效率和更快的学习速度;二是将基于万有引力定律的种群更新方法引入到策略搜索过程中,使其具有更强的探索性和更好的稳定性.将GSA-TD3应用于一系列复杂控制任务中,实验表明,与前沿的同类深度强化学习方法相比, GSA-TD3在性能上具有显著的优势.
其他文献
少数民族村落景观是农村地区的重要特色资源，对其进行保护与充分利用，在实现乡村振兴战略中能够发挥出重要作用。基于此，分析少数民族村落景观赋能乡村振兴发展的背景，并强调少数民族村落景观的价值，提出一系列利用少数民族村落景观推动乡村振兴发展的路径，包括重视对少数民族村落景观特点与特色文化的保留及创新利用、依托科学规划构建更具独特性的聚落景观、注重少数民族村落景观的更新与保护、营造少数民族村落生产休闲空间
以豆渣为原料通过一步碳化磺化法制备豆渣基炭磺酸催化剂,以催化合成乳酸丁酯为探针,考察了原料比、碳化磺化温度、碳化磺化时间等因素对制备催化剂的影响。通过红外光谱、热重分析对豆渣基固体酸进行表征,并采用直接滴定法检测其表面酸量。结果表明,将干豆渣和浓硫酸在质量比为1:12、碳化磺化温度180℃、碳化磺化时间2.5h的条件下所得到的催化剂具有较好的催化效果,乳酸丁酯的酯化率可以达到97.4%。
乡村景观的管理和维护能够提高国土景观的多样性，是相关工作人员需要重点关注的内容。在乡村振兴的时代背景下，如何发展美丽乡村成为主要的工作内容，农业的景观发展方式也在产生了巨大的变化。做好景观设计工作能够让区域内的生态环境更加和谐，从而提高经济建设工作的质量，让自身的社会价值可以在最大程度上展现出来；能够促进乡村在崭新的时代发展下拥有更加璀璨的发展前景。优化原本的发展理论体系，实现研究工作思路的拓宽，
针对目前联合作战气象海洋保障体系信息化水平难以满足需求的问题，本文提出基于“云”的理念构建智能高效的联合作战气象海洋保障体系，建立基于“云”的气象海洋保障体系服务模型和部署模型。模型具体描述了基于“云”的气象海洋保障体系服务模式和部署方案，打造了“云+端”服务模式，实现了军委-战区两级部署、作战集团以终端模式连接云端。构建了气象海洋私有云加公有云的混合式部署模型，使二者的部署完全物理隔离，实现了个
融资租赁作为一种兼具“融资”与“融物”双重职能的新型经营模式,在中国的经济高速发展、国内基层医疗制度不断改革、政府和政策以及行业的支持、中国金融市场的繁盛发展以及医疗资源下沉的大环境下,分级诊疗势在必行,而庞大的基层医疗机构设备资金问题成为一大难题。构建完善的医疗领域融资租赁体系,打破固有的传统引进采购模式,让医疗领域各种力量在其可承受范围内发挥其优势和能力,推进国家卫生医疗体制改革推进,从而创造
＜正＞作为乡村振兴过程中不可或缺的物质载体，乡村自然生态和景观元素在不断的自我循环中为乡村建设提供了强大支持。2023年“”中央一号文件中关于“扎实推进宜居宜业和美乡村建设”部分详细阐述了进一步提升乡村公共服务能力、持续加强乡村规划建设的重要性，其为各地站在战略和全局高度构思乡村发展实践，以及反思景观规划存在的问题，提供了重要理论指导。