【摘 要】
:
现有新闻推荐模型在挖掘新闻特征和用户特征时,往往没有考虑所浏览新闻之间的关系、时序变化以及不同新闻对用户的重要性,从而缺乏全面性;同时,现有模型在新闻更细粒度的内容特征挖掘方面有欠缺.因此构建了一个能够全面而不冗余地进行用户表征并能提取新闻更细粒度片段特征的新闻推荐模型——注入注意力机制的深度特征融合新闻推荐模型.该模型首先采用基于深度学习的方法,通过注入注意力机制的卷积神经网络(CNN)对新闻文本特征矩阵进行深度提取;然后,通过对用户已经浏览的新闻添加时序预测,并注入多头自注意力机制,来提取用户的兴趣特
【机 构】
:
同济大学电子与信息工程学院,上海201804
论文部分内容阅读
现有新闻推荐模型在挖掘新闻特征和用户特征时,往往没有考虑所浏览新闻之间的关系、时序变化以及不同新闻对用户的重要性,从而缺乏全面性;同时,现有模型在新闻更细粒度的内容特征挖掘方面有欠缺.因此构建了一个能够全面而不冗余地进行用户表征并能提取新闻更细粒度片段特征的新闻推荐模型——注入注意力机制的深度特征融合新闻推荐模型.该模型首先采用基于深度学习的方法,通过注入注意力机制的卷积神经网络(CNN)对新闻文本特征矩阵进行深度提取;然后,通过对用户已经浏览的新闻添加时序预测,并注入多头自注意力机制,来提取用户的兴趣特征;最后,使用真实的中文数据集与英文数据集,以收敛时间、平均值倒数秩(MRR)和归一化折现累积收益(nDCG)为指标进行实验.与基于多头自注意力的神经网络新闻推荐(NRMS)模型等进行对比,该模型在中文数据集上nDCG的提升率为-0.22%~4.91%,MRR的提升率为-0.82%~3.48%,而且,与唯一为负提升率的模型相比,收敛时间缩短7.63%;在英文数据集上该模型在nDCG和MRR上的提升率分别为0.07%~1.75%与0.03%~1.30%,且该模型始终具有较快的收敛速度.消融实验的结果表明增加注意力机制与时序模块是有效的.
其他文献
随着装配式混凝土结构建筑的快速发展,混凝土预制构件实现工业化生产.预制构件堆场是决定预制构件工厂建造成本控制及投产运营是的关键元素之一,因此堆场的工艺布局,设备选型、规格及数量,以及各作业环节的衔接效率等是核心研究内容.预制构件堆场工艺设计标准化研究为堆场设计各环节提供了理论依据,提高了工艺设计效率和设计合理性,降低建造返工率,有效进行成本控制,为装配式建筑行业预制构件工厂设计提供进一步参考.
为满足客户对装载机智能化、自动化的需求,提高装载机的作业效率,减轻驾驶员的劳动强度,根据装载机的工作特点、操作方式,对装载机的辅助操作控制系统进行研究,设计开发一种装载机辅助操作控制系统.该系统实现了装载机辅助换挡、一键举升、自动放平、缓冲、微动等功能,极大地简化驾驶员操作.
通过对现有机械中六连杆机构铰点的设计研究,阐述了传统分析方法和基于creo动力学分析法的基本流程,表明动力学分析在六连杆机构设计中应用的可行性和优越性,该方法具有MDS多起点研究寻解、多变量参数和约束条件耦合、高效率等优点.
支座是桥梁的重要传力装置,桥梁支座生产或安装施工的质量问题,往往会导致支座在使用过程中发生较大的移位甚至损坏,给整个桥梁结构带来安全隐患,所以桥梁支座的检测试验和安装过程中的质量控制是影响桥梁支座有效使用寿命的关键因素.通过研究某大跨度连续桥梁球型钢支座的试验检测和安装技术,总结出了球型钢支座检测试验与安装的质量控制技术要点,值得在类似工程中推广应用.
在装配式建筑预制构件中,楼梯、飘窗、阳台等构件尺寸、形状不规则,统称为复杂构件.复杂构件由于装模、布钢筋、布混凝土等工序都较为复杂,难以在PC构件流水线上流转生产.研究设计兼容所有复杂造型PC构件工业化生产制造的工艺技术,使得各类构件可以在产线上同时生产、养护,提高产线的利用率,具有较高的经济价值.
本文分析了商品混凝土的碳足迹,重点分析混凝土生产企业碳排放特点,在此基础上提出了相应的低碳混凝土生产技术,以及对低碳型混凝土生产企业建设提出思考.
越野轮胎起重机是一款操作方便、路面适应性强,可带载行走,可用于建筑工地的吊装作业的非道路车辆.回转支承是起重机回转系统的重要组成部分,和转台、吊臂、底盘组成起重机工作机构,承载回转过程中的各种工况.其中回转支承主要用于连接转台、吊臂和底盘,是传递转台与底盘间各种载荷的重要部件,因此也是回转时容易出现故障的地方.本文旨在指出起重机作业过程中可能出现的回转异响状况,根据现场现象初步判断,浅析越野轮胎起重机回转异响的适用方案.
针对现有决策树算法对连续性数据分类的信息丢失、效果不佳等缺点,提出一种邻域决策树(NDT)构造算法.首先,挖掘了邻域决策信息系统上的变精度邻域等价粒,并探讨了相关性质;然后基于变精度邻域等价粒构建邻域基尼指数度量,以度量邻域决策信息系统的不确定性;最后,用邻域基尼指数度量诱导出树节点的选取条件,并以变精度邻域等价粒为树分裂规则,从而构建NDT.在UCI数据集进行实验的结果表明,NDT算法的准确度比基于信息熵的决策树算法ID3、基于基尼指数的决策树算法CART、基于信息增益率的决策树(C4.5)算法和融合信
介绍某型挖掘机工作过程中经常反馈发动机水温高甚至报警,每天早上检查散热器上水室均发现缺冷却液,需要补充冷却液.根据故障现象从冷却系统结构及原理方面分析问题原因,排查出水温高的根本原因是水箱盖密封不严导致散热器不能正常回水,最终通过水箱盖设计改进消除故障.
针对现有人群计数算法采用同步人工优化深度学习网络,忽略了网络学习的负面信息,导致大量冗余参数甚至过拟合,进而影响到计数准确性的问题,提出基于多列卷积神经网络MCNN(Multi-column Convolution Neural Network)的参数异步更新算法.首先将单帧图像输入网络,经过三列卷积分别提取不同尺度特征,通过列之间的交互信息学习两列间特征图的关联性;接着,根据优化的交互信息及更新的损失函数异步更新每列参数直至算法收敛;最后采用动态卡尔曼滤波将每列输出密度图进行深度融合,并对融合的密度图中