基于异质信息网络的强化学习推荐系统

来源 :烟台大学 | 被引量 : 0次 | 上传用户:liweitxwd147
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于强化学习的推荐系统通过与用户不断交互,能够适应用户的偏好变化并能考虑到商品的潜在未来收益。但目前仍存在一些挑战,比如用户的交互数据存在多变、稀疏以及复杂的问题。用户和商品以及相关的附属信息能够构成一个异构信息网络,将异构信息网络融入到强化学习方法中能够捕捉用户和商品之间的拓扑结构以及潜在联系,缓解数据稀疏并考虑推荐商品的长期价值。受此启发,本文围绕如何在基于强化学习的推荐系统中有效利用辅助信息这一问题,开展以下三个工作:(1)提出基于知识引导的自适应序列强化学习模型,通过知识图谱的特征信息和用户-项目交互序列自适应地截取出不同长度的漂移序列,利用该序列能够提升推荐系统的探索能力,及时捕捉用户的偏好漂移。此外,借助知识图谱的特征信息设计了一个新的复合奖励函数,包括折扣序列奖励和知识图谱奖励,该复合奖励函数能够缓解奖励稀疏和收敛速度慢的问题。(2)提出基于深度强化学习的多层注意力社交推荐模型,通过深度强化学习方法和端到端的方式学习用户的动态偏好。采用子图构建用户和项目的结构化表示方法以此适应交互式推荐框架。当用户-项目二部图中用户交互数据匮乏时,利用异质信息网络中社交信任邻居之间的信息传递,间接分析出目标用户的个性化偏好。此外,状态表示模块设计了多层注意力机制,缓解子图内噪声节点的影响,提高状态的个性化表示。(3)提出一种社交多智能体强化学习模型。首先该模型通过构建两个智能体来增强推荐性能。其次,分别为不同智能体设计相应的状态表示模块,用于从社交网络和用户评分矩阵中学习状态表示。最后,为了高效利用社交网络中邻居节点,除一阶社交邻居特征外,还使用信任推理的方式聚合高级社交邻居特征,以缓解数据稀疏和冷启动的问题。
其他文献
目的:研究急诊下肢骨折患者行超声引导下神经阻滞麻醉对机体术后康复的影响,为制定急诊下肢手术麻醉方案提供依据。方法:选取医院急诊收治的100例下肢骨折患者,采用随机数表法将其分为对照组(45例)和观察组(55例),对照组采取椎管内麻醉,观察组采取超声引导下神经阻滞麻醉,对比两组麻醉开始前(T0)、麻醉开始后5 min(T1)、麻醉开始后10 min(T2)、麻醉开始后15 min(T3)以及麻醉开始
期刊
<正>随着新技术的广泛应用,数字经济成为驱动我国经济增长的重要引擎。数字经济发展进程中,数字生态是一个多方主体共同参与,以信息化、数字化、智能化技术为基础,通过参与方之间广泛连接互动,推动数据、信息、资金、人才等循环流动的经济系统。数字生态近年来在创造新的就业岗位、优化就业结构等方面发挥着越来越重要的作用。全面落实就业优先政策,实现稳就业目标,需要发挥数字生态带动新增就业的力量。
期刊
<正>为深入学习贯彻党的二十大精神,系统研究阐释习近平新时代中国特色社会主义思想,2022年11月26日,由中国社会科学院习近平新时代中国特色社会主义思想研究中心、中共湖南省委宣传部主办,湖南省社会科学院(湖南省人民政府发展研究中心)承办的“全国社会科学院系统习近平新时代中国特色社会主义思想论坛”在长沙召开。中国社会科学院副院长、党组成员甄占民,湖南省委宣传部分管日常工作副部长卿立新出席会议并致辞
期刊
目的:临床研究部分:观察知柏地黄汤加味治疗肝肾阴虚型晚期宫颈癌的临床疗效;网络药理学部分:通过网络药理学方法,探究知柏地黄汤加味治疗宫颈癌的分子机制。方法:临床研究部分:病例选自2022年01月—2023年01月于本院肿瘤科门诊就诊的肝肾阴虚型晚期宫颈癌患者60例,给予知柏地黄汤加味治疗,采用自身前后对照的临床研究方法,三周为一个周期,共服用四个周期,评估治疗前、治疗2个周期后、治疗4个周期后的瘤
学位
<正>党的十九大以来,以习近平同志为核心的党中央高度重视审计工作,着眼党和国家事业发展全局,改革审计管理体制,组建中央审计委员会,加强党中央对审计工作的集中统一领导,着力构建集中统一、全面覆盖、权威高效的审计监督体系,推动新时代审计工作取得历史性成就。作为融理念、知识、经验、方法等于一体的审计理论工作,与审计实践同频共振,也在创新发展中不断发挥着重要的引领和支撑作用。回顾总结近五年中国特色社会主义
期刊
<正>审计理论研究是审计工作的重要组成部分。随着我国审计事业的不断发展,审计理论研究在探索社会主义审计监督制度、构建中国特色社会主义审计理论体系方面,做了大量富有成效的工作,取得了丰硕的成果,为促进我国审计事业发展提供了有力指导和理论支撑。“十四五”国家审计工作发展规划指出,要根据审计实践需要,强化审计理论研究,推动审计理论、审计实践和审计制度创新。开展审计理论研究,
期刊
<正>2021年10月23日,十三届全国人大常委会第三十一次会议审议通过了关于修改审计法的决定,并自2022年1月1日起施行。审计法的修订和施行,是中国特色社会主义审计制度发展史上的一件大事,对于保障审计机关依法行使审计监督权和充分发挥审计监督的作用具有十分重要的意义。审计科研工作者应认真学习领会新修订的审计法,并在此基础上深化审计理论研究工作,为审计制度的完善和发展作贡献。
期刊
<正>研究型审计是立足于新时代审计工作面临的新任务、新要求和新使命,是对审计工作在理论认识和实践要求方面的进一步深化。深入开展研究型审计是实现新时代审计事业高质量发展的必由之路,更是围绕国家经济社会发展主要目标,依法全面履行审计监督职责,治已病、防未病,充分发挥审计在党和国家监督体系中重要作用的内在要求。
期刊
<正>党的十八大以来,以习近平同志为核心的党中央高度重视审计工作,对提高审计能力和水平、更好发挥审计监督作用作出一系列重要部署、提出明确要求。审计机关要立足“审计监督首先是经济监督”的定位,坚持查真相、说真话、报实情,把“是什么、为什么、怎么样、如何办”贯通起来,以审计事项的来龙去脉为核心,向前追溯分析原因,向后延伸研判后果,下以基础理论为支撑作出科学判断,
期刊
<正>党的历史是最生动、最有说服力的教科书,推动党史学习教育常态化长效化是高校落实立德树人根本任务、筑牢意识形态阵地的必然选择。2022年初,中共中央办公厅印发了《关于推动党史学习教育常态化长效化的意见》,提出“积极探索适合不同行业、不同领域、不同群体深入学党史的方法途径,既要精准有效覆盖,又要生动鲜活开展,使学党史、知党史、用党史在全社会蔚然成风”。
期刊