基于Spark电商用户行为数据的分析与研究

来源 :沈阳师范大学 | 被引量 : 1次 | 上传用户:ssdkln
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着时代的进步和发展,数据对我们来说越来越重要。大数据的到来创新了计算机和其他行业的技术,将我们带入了大数据的时代。由于电商的发展迅速,现在很多的电商平台也使用了大数据技术或者是云计算来进行数据管理[1]。当下使用最多的大数据框架有Hadoop和Spark,通过从电商平台获得到的用户行为数据进行分析,从而猜测和推荐用户的喜好商品,满足用户的需求。因此了解用户的行为,是电商行业发展的必要条件。本文是基于大数据角度来进行分析的,数据是通过相关平台的运营商提供的真实的数据,把这些得到的数据进行处理、挖掘以及分析并且得到相对应的结果。通过分析用户的行为,运用均值聚类算法、朴素贝叶斯方法、决策树算法等方法的结合将这些数据进行整合分类,电商平台根据这些分类的数据预测出用户喜爱偏好的商品,可以更加有针对性的为用户提供相应的商品,节省彼此的时间。本论文主要研究工作如下:(1)本文从电商用户行为数据的预处理,用户行为特征数据挖掘和用户行为分析三个方面入手,对用户数据进行分类,通过分类来分别对数据进行分析,得到结果。(2)处理数据的过程中会有一些冗余的数据,首先要去除分离这些数据,以免在分析过程中浪费时间,然后对数据进行相关的操作,通过分类来判断用户的基本信息,例如:是否为该平台的新用户,是否是在该平台上有历史订单等,本文运用的框架是Spark框架,介绍了Spark的基本概念以及与其他框架的对比,此类框架的应用也是本文的一大亮点。(3)本文还运用到了一些算法的结合,例如:聚类算法,决策树算法以及基于数学分类统计算法的朴素贝叶斯方法来对数据进行处理,通过计算算出特征加权后的结果与普通数据进行对比分类。(4)最后,通过虚拟机的搭建,Spark框架环境的搭建,对电商平台的用户行为数据进行分析,得到相对应的用户购买信息数据,根据这些数据分析用户的购买意向。
其他文献
总结54例骨盆恶性肿瘤手术后并发症的观察及护理。手术后严密观察创口及患肢皮肤的颜色、温度、活动、感觉、肿胀、疼痛等情况,做好引流管护理、体位护理,加强对感染、血肿及创
总结16例开放性皮肤软组织缺损患者实施负压闭式引流术后的护理。认为护理重点为正确调节负压,保持引流管通畅,保证有效引流,发现引流管引流不畅、阻塞、脱出及时处理,能促进
马克思的《关于费尔巴哈的提纲》(以下简称《提纲》)是马克思主义哲学新世界观形成的一个萌芽。马克思在《提纲》中指出人的思维的真理性问题的实践性本质;其次对于社会生活
固体中的磁电耦合效应允许电场调控物质的磁学性质及磁场调控物质的电学性质,不仅拥有丰富的物理内涵,而且在新型多功能微电子器件等领域有着巨大的应用前景。本论文围绕高压
目的:探讨钟表盘综合定位技术在对肺内结节患者进行胸腔镜手术中的应用价值。方法:选取2015年5月至2017年7月期间成都市双流区第一人民医院收治的49例肺内结节患者作为研究对象
目的:分析联用拉莫三嗪和丙戊酸钠治疗癫痫的效果。方法:择取2015年10月至2017年10月新疆生产建设兵团第六师医院收治的65例癫痫患者作为研究对象。将其随机分为研究组(35例)和对
近年来信息技术革命性发展带来了工业产业智能制造的迅速发展。在中国制造2025的推进中,制造型企业投入大量资金推进企业两化融合建设,提升企业信息化和智能制造水平。在企业结合业务需求推行两化融合过程中,往往以原有流程框架为主导,利用信息化技术改善部分业务环节和功能。但是随着信息技术和智能制造技术在企业深入运用,原有的业务流程呈现出重复冗余,效率低下等问题。因此,重新梳理企业业务流程,以信息技术为手段,
分析29例内镜下结肠息肉电凝切除术后出血的诱因,提出相应护理对策。内镜下结肠息肉电凝切除术后并发出血多由术后不适当行为造成,过早剧烈活动、用力排便、饮食不当等是主要
总结持续质量改进在病区发药管理中的应用体会。成立持续质量管理活动小组,围绕病区发药管理中存在的缺陷情况进行讨论,运用持续质量改进方法,制定预期目标,采取相应质量改进
开展任何一项工作,首先看态度,关键看行动,最终看效果。$$“各地区各部门各单位要结合实际,创造性开展工作,把学习教育、调查研究、检视问题、整改落实贯穿主题教育全过程,努力取得
报纸