基于Attention&DeepFM的点击率预估模型研究

来源 :广东财经大学 | 被引量 : 0次 | 上传用户:wt920997920
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
科技的进步为互联网提供了迅猛发展的基础,互联网的发展为不同行业提供了更多的机遇和信息财富。在这个被数据包裹的时代中,网民每时每刻都在产生信息数据,例如页面浏览记录、购物记录、点击记录等,从互联网所产生的海量数据中挖掘出有利于用户和互联网服务行业的信息至关重要。电商平台精准推送出用户喜爱的广告产品能够为用户带来良好的购物体验,以及为广告商带来丰厚的收益。点击率预估是推荐系统中一个关键的技术要点,如何精准预估出用户点击某事物的概率一直是工业界和学术界热门的话题。深度学习在解决点击率(CTR)预估问题上有良好的效果,但近年来所提出的点击率预估模型依然存在不足。本文研究对比各类流行的点击率预估模型,提出了一种更加新奇有效的Attention&DeepFM模型,并通过实验验证出模型的有效性。本文主要研究内容如下:(1)本文对两大公开数据集Amazon(Beauty)数据集和beer_reivews数据集进行数据处理,将数据按时间重新构造成用户历史行为序列,并根据新序列划分训练集、验证集、测试集。(2)研究当下各种流行的点击率预估模型以及其衍生模型进行实验分析,对比各模型的优势与不足明确研究方向。深度兴趣模型学习能力强,不需要复杂人工特征工程,但用户行为序列信息利用不充分,各模型忽略了用户兴趣的动态变化,且低阶、高阶特征信息往往没有兼顾利用。本文探讨并研究一种兼顾低阶、高阶特征交互信息和提取用户兴趣的点击率预估模型。(3)提出Attention&DeepFM模型。本模型结合了流行模型的优点,规避了不足。模型通过Embedding层将原始高维稀疏映射为低维稠密向量,再分别输入FM模型和改进深度兴趣模型,最后通过多层感知机输出点击率预测结果。改进深度兴趣模型引入了注意力机制能够充分提取用户历史行为序列中的兴趣点,并利用GRU网络学习出用户的兴趣演化过程。此外,针对互联网用户原始数据特征高维且稀疏的特性,模型融入FM学习低阶特征交互信息,并利用深度神经网络学习高阶特征交互信息,可以很好优化点击率预估模型性能。(4)通过Amazon(Beauty)数据集和beer_reivews数据集两大公开数据集进行实验,实验结果表明Attention&DeepFM模型由于能够提取用户兴趣、学习用户兴趣演化过程和学习低阶、高阶特征交互,它的预测性能明显高于其他对照模型。
其他文献
期刊
随着我国经济的发展,我国的生产资料得到了极大的丰富,经济也稳居在世界第二,虽然最近两年经济受到疫情影响,但经济增加的势头仍然强劲。在我国发展规划中,为了构建完整的内需体系,应对不确定的风险挑战,扩大国内和国外的需求成为谋划我国经济下一进程的重点内容,小微企业在我国经济建设中充当了保驾护航的角色,在我国实现民族复兴的伟大事业和我国经济双循环目标下,我国政府也不断加大对小微企业的政策和资金支持。然而,
学位
本文结合实际工程,详尽阐述了现浇梁支架的工程技术,包括测量放样、地基处理、支架安装、底膜安装、钢筋绑扎、拆除底板等,分析总结了各种支架的选择方案,以期为同类型项目的施工提供一些借鉴经验。
期刊
近年来,我国经济从高速发展转向高质量发展,我国经济基本盘受到了较为严峻的考验。我国居民消费和投资需求逐渐萎缩,外国企业凭借着强大的技术壁垒和资本优势对我国经济体造成供给侧的强烈冲击,同时我国国民对经济增长的期望逐渐转向保守甚至负面。正值我国经济发展的列车变速转轨的关键时期,我国又遭受到了世纪疫情的冲击,使得我国的经济局面和外部环境更加错综复杂。面对国内外经济的严峻考验,我国必须坚定不移地深化经济改
学位
随着计算图形芯片性能的日益强大,增强现实和虚拟现实的兴起,各行各业对图像即时预览的需要,人们在日常生活中对数字娱乐的需求,实时图形渲染在当今社会生活中有着举足轻重的作用,而逼真的毛发渲染一直是计算机图形学的难题之一,由于毛发成千上万的数量特征,对其的绘制会带来一定程度的性能问题。桌面端虽有着较为成熟的毛发绘制方法,但由于移动设备的图形性能有限,目前在移动端上的毛发绘制方案较为单一且简单,在效果上差
学位
对各种领域的真实网络进行重叠社区发现,对于理解复杂网络的结构和演化起着关键作用。社区结构是网络中的局部性质,与节点局部邻域的构成紧密相关,本文对基于节点一阶邻居中心性和节点k-shell重要性的重叠社区发现算法开展研究,主要工作有:(1)提出了一种基于节点及其一阶邻居动态度信息的节点中心性度量指标,即节点一阶邻居中心性。根据节点及其一阶邻居的度信息计算每一轮的节点中心性,选择中心性大于等于指定阈值
学位
叶家山M28随葬有形制、纹饰、大小、铭文基本相同的三套"曾侯谏"铜鼎和一对"曾侯谏作媿"铜簋,本文依据晚商西周时期高级贵族墓中鼎簋组合提供的线索,认为这是一种与墓主身份等级相适应的器用制度。该器用制度的年代可追溯到晚商时期,并延续到西周中期,呈现相对稳定的状态,这为推定叶家山M28墓主是曾侯谏提供了有力证据,也为认识商周器用制度的演变提供了一条较为清晰的轨迹。
期刊
<正>近年来,湖南省永州市新田县深入贯彻习近平总书记关于经济社会发展的重要指示精神,围绕“助企业保就业惠民生”工作主线,聚焦企业痛点、堵点、难点,精准对接人社服务资源供给与企业发展需求,下好“搭平台”“稳岗位”“优服务”三步棋,持续为企业送政策解读、送服务指导、送技能培训、送纾困资金,全力当好“金牌服务员”和“惠企纾困”贴心人,为县域实体经济发展“输血补气”。
期刊
随着我国资本市场不断提高对外开放程度和分拆上市的规范化,上市企业有效实施分拆上市可以起到改变企业形象、提高企业价值、消除“负协同效应”、股东权益和管理层更好结合、适应法规条例和理顺控股架构等作用,因此受到众多企业和学术界关注,中国企业应更加进一步关注资本运作。作为第一家以IPO形式回归国内的海外独角兽公司,药明康德凭借其国内行业的领先地位,上市以来创造了连续16个交易日涨停的骄人表现,这正是因为其
学位
目的 分析2016—2022年成都市温江区艾滋病自愿咨询检测(VCT)门诊求询者特征和HIV感染情况,为制定艾滋病预防控制措施提供科学依据。方法 以2016—2022年在成都市温江区VCT门诊接受VCT服务并登记上报的求询者作为研究对象,从艾滋病综合防治信息系统中下载2016—2022年温江区VCT数据库,采用SPSS 23.0统计软件进行χ~2检验、趋势卡方检验及Logistic回归分析,以P<
期刊