【摘 要】
:
针对多智能体系统(multi-agent systems,MASs)中环境具有不稳定性、智能体决策相互影响所导致的策略学习困难的问题,提出了一种名为观测空间关系提取(observation relation extraction,ORE)的方法,该方法使用一个完全图来建模MASs中智能体观测空间不同部分之间的关系,并使用注意力机制来计算智能体观测空间不同部分之间关系的重要程度。通过将该方法应用在基
【机 构】
:
中国科学院沈阳自动化研究所机器人学国家重点实验室
【基金项目】
:
国家自然科学基金资助项目(92067205); 辽宁省自然科学基金资助项目(2020-KF-11-02); 机器人学国家重点实验室开放课题(2020-Z11);
论文部分内容阅读
针对多智能体系统(multi-agent systems,MASs)中环境具有不稳定性、智能体决策相互影响所导致的策略学习困难的问题,提出了一种名为观测空间关系提取(observation relation extraction,ORE)的方法,该方法使用一个完全图来建模MASs中智能体观测空间不同部分之间的关系,并使用注意力机制来计算智能体观测空间不同部分之间关系的重要程度。通过将该方法应用在基于值分解的多智能体强化学习算法上,提出了基于观测空间关系提取的多智能体强化学习算法。在星际争霸微观场景(StarCraft multi-agent challenge,SMAC)上的实验结果表明,与原始算法相比,带有ORE结构的值分解多智能体算法在收敛速度和最终性能方面都有更好的性能。
其他文献
文中结合工程实例,对项目街道进行实地调研,分析现状特征,探索相应的改造策略与新技术的应用,以期为道路更新项目的植物景观改造提供参考与思路。
应对气候变化是全人类的共同责任,"双碳"目标是中国向世界作出的应对全球气候变化,参与全球气候治理的庄严承诺。作为绿色金融的重要组成部分的气候投融资,在适应和减缓气候变化、促进"双碳"目标实现方面发挥着重要作用,这需要相匹配的法律保障和制度设计的支撑。但目前涉气候投融资立法层级较低且法律约束有限,气候投融资面临着物理风险和转型风险,气候投融资标准及气候信息披露不完善等问题,困扰着"双碳"目标下的气候
从建设单位、建筑企业和建设项目的三方耦合关系出发,在微观层面上探究“工程分包困局”的成因。由于总包商在项目治理中的双重身份,工程分包中出现的许多问题都可以在项目采购环节找到原因。“工程分包困局”的根本原因在于我国建筑业在转型期存在的一些结构性问题,这些问题严重削弱了总包商的竞争力,并且使受诟病的“包工队”模式得以存续。不解决这些问题,即使政府取消了对分包的限制,也未必能真正走出困局。
推动产教深度融合是促进职业教育高质量发展的迫切要求,是加快建设技能型社会和深入推进创新驱动战略、人才强国战略的重要举措。在全球新一轮科技革命和产业变革不断催生新产业新职业新业态,开放的“双循环”新发展格局迫切需求经济发展新动能,党和政府高度重视并持续推动产教深度融合,当前职业教育产教融合存在主体认识不统一、有效支持机制不完善等发展短板等多重背景下,新时期职业教育产教深度融合在领域延伸、对接需求、搭
快速发展的平台经济在为我国社会经济注入全新活力之时,也易因资本的无序扩张形成垄断格局,在损害私益的同时也造成了诸如市场竞争不足、市场运行失灵及广泛消费者福利受损等公共利益受损后果。为遏制垄断问题、规范平台经济有序发展,当前国家从立法和执法维度进行了一系列法治规制,较少从司法乃至公益诉讼维度思考。作为国家公共利益的代表,检察机关应在积极稳妥地探索公益诉讼"等外"领域背景下,考量和证成对垄断平台经济相
大豆压榨厂用溶剂浸出大豆生产豆粕,由于豆粕的低成本和生物有效性,在饲料配方中作为普通的植物蛋白资源。豆粕蛋白质的重要质量指标是低含抗营养因子低和高蛋白消化吸收率。我国大豆压榨厂进口大豆,采购定价参照美国2号大豆,很多公司取消热损率,这样的采购指标不能代表大豆的质量,油厂出售的豆粕指标也没有反映豆粕的真实质量。不同的国家的大豆营养组成存在差异化随之生产的豆粕营养成分也有差别。养殖业家禽动物在不同的生
以我国建筑业面临的“工程分包困局”为背景探析相关的理论问题。古典政治经济学的分工理论和比较优势理论可以很好地解释专业化分工的经济合理性,但是对“反命题”的解释能力不足。为了对这一困局作出合理的解释,需要引进交易成本的概念。走出这一困局,不仅需要公共制序(政府规制和法律手段),而且需要私人制序(公司治理和项目治理)。
"单元整体教学"是以统编小学语文教材的主题单元为依托,在整体把握单元目标和内容的基础上对教学资源进行统整、再开发的一种教学活动形式。小学语文单元整体教学得益于统编语文教材人文主题和语文要素双线组织单元的编排特点,更易紧扣教学主题,以整体视角对单元内的课文、习作、口语交际、语文园地等学习内容进行整体设计。一、实施单元整体教学,需要分析教材的前后关联研究单元整体教学需要围绕语文教材的人文主题和语
以油茶饼粕为原材料,采用超声细胞破碎仪在超声功率475 W、超声时间4 min、工作间隔2 s的条件下进行预处理,进一步在微波反应器中提取茶皂素。在单因素的基础上,采用Plackett-Burman试验设计筛选出具有显著影响的试验因素;通过Box-Behnken试验对工艺参数进行优化。结果表明:最佳提取工艺参数为乙醇体积分数59%(v/v)、提取温度59℃、微波功率480 W、微波提取时间8 mi
习近平总书记强调,实现碳达峰碳中和,是贯彻新发展理念、构建新发展格局、推动高质量发展的内在要求,是党中央统筹国内国际两个大局作出的重大战略决策。金融是现代经济的核心,必须为实现碳达峰碳中和贡献力量。金融机构要践行“绿水青山就是金山银山”理念,深入分析推进碳达峰碳中和工作面临的形势任务,