基于大数据的用户分析系统的设计与实现

来源 :北京交通大学 | 被引量 : 0次 | 上传用户:lomon521mutou
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息化程度的不断加深,国内诞生了许多的超级APP从而促使了小程序的火热。软件开发方往往不再拘泥于开发APP端,而是多平台的投放应用。且如今大数据已经渗透到了各行各业,利用大数据对于用户数据的分析在竞争激烈的当下已经不可或缺,精准营销也不再是老生常谈的问题。如何帮助甚至是Severless架构的程序开发方快速的实现多端多平台的用户数据汇总分析,助其盈利是重中之重。本文通过对比如今数据处理现状、大数据平台现状、用户分析系统现状,取其精华设计了一套在当下解决上述问题的基于大数据生态并且包含户标签挖掘服务的用户分析系统。该系统通过与一套基于Vue的跨端无痕埋点的前端框架配合形成了主要包括数据处理、数据展示、用户标签挖掘三个模块的用户分析系统。其中数据处理模块实现了与前置框架的对接并存储处理数据;数据展示模块从多个维度将用户的分析数据呈现给软件开发方;用户标签挖掘模块是对用户数据挖掘形成标签数据提供给软件开发方使用,助其精准营销;同时接入广告系统助其盈利。系统通过Kafka与Flume配合将数据落地到HDFS中与Hive对应,并使用Spark作为数据操作引擎将数据存储到Mysql中。Web端采用B/S架构,使用Spring+Mybaits配合Mysql组成后端进行业务数据交互。并通过K-means产生聚类标签,TF-IDF产生文本挖掘标签。论文结合软件工程的思想与步骤阐述了基于大数据的用户分析系统的设计与实现。从业务过渡到功能性需求,非功能性需求,并基于此进行模块划分,进而展现了系统架构,数据仓库,数据库的概要设计。并对三个模块中的重要功能进行了详细设计以及过程的介绍。最后是对系统进行功能与性能的测试。目前本系统已经上线使用,并且月活量已经超过8亿。为软件开发方提供了详细的用户数据分析。
其他文献
纯东新区构造复杂,在开发过程中注采矛盾频频出现,由于断层发育数量较多,小层顶面微构造十分发育,断层与微构造对剩余油的影响关系不清楚。因此对研究区目的层进行精细构造研
枣(Ziziphus jujuba)原产于我国,近年来,随着新疆林果业的发展,枣已经成为新疆主要经济林树种,也成为农民调整农业产业结构和提高经济效益的主要模式。由于长期缺乏对枣营养
本论文以平面分析理论和动态分析理论为分析架构,以真实语料为基础,探讨现代汉语“事实上”在语义和语用层面的语言现象,并将研究结构应用在中文教学中。本文首先考察了“事实上”的研究现状及其虚化过程,归纳出其有待研究的空间。其次,选取了 1000条北京大学CCL语料库和BCC语料库的相关语料,基于平面理论和篇章功能理论,从静态和动态两个层面对“事实上”进行了研究。再次,分析了动态语料库中的偏误,并设计了
本文主要研究了对于任意的p>0,随机时滞微分方程解析解p阶矩指数稳定与数值解p阶矩指数稳定的等价性.此外,我们用不同的数值方法探讨了解析解和数值解稳定性的等价关系.当漂移项与扩散项满足全局Lipschitz条件时,我们证明随机θ方法的p阶矩指数稳定与随机时滞微分方程解析解的p阶矩指数稳定的等价性.当漂移项与扩散项满足局部Lipschitz条件和Khasminskii-type条件时,我们证明
作为环境友好型材料,TiO2是一种无嗅无毒、性质稳定且原材料来源丰富的物质,同时具有优异的光学和电学性能,这些特点使其被广泛应用在医药化工、环境治理及光电器件制造等领
建国以来,煤炭资源作为国民经济发展的重要能源,处于我国能源结构的的首要位置。在国民经济的发展过程中,煤炭工业始终扮演着重要角色。安全生产既是职工的生命健康的保障,也是企业安全效益的重要保证,是关系国家经济发展的大事。我国煤炭资源丰富,开采条件复杂。煤炭行业属于地下作业,生产环境恶劣,条件艰苦,一旦发生事故对于煤矿和家庭都将带来难以弥补的伤害。近年来我国煤矿的安全生产条件逐渐好转,但是同发达国家相比
四硫富瓦烯(Tetrathiafulvalene,TTF)作为给电体分子并且具有两步可逆氧化还原行为,是有机导体的重要前体物。将TTF基元引入配位化合物或聚合物中,其氧化还原活性仍能保持。
近年来,Ru-Ru金属键单元的分子材料研究发展迅速。尤其是基于Ru24/5+的分子基磁体的构建受到了极大的关注。双核钌单元和一些酸根配体(羧酸根、碳酸根、磷酸根、硫酸根等)桥接
目的:针对脑卒中后腕、手运动功能恢复而研制的一种与低频电刺激结合的新型手套,为临床治疗寻求更为有效的治疗方法。方法:根据手部相关肌肉运动功能特点研制一种新型、用于
在三软煤层中开掘和维护的巷道,其持续变形时间长、变形速度快、变形量大,长期以来,三软煤层巷道的支护问题一直是困扰生产的难题。本文基于罗花崖煤矿副斜井过三软岩层区段巷道支护问题,通过室内试验、现场监测、理论分析、数值模拟等手段对三软煤层巷道支护技术开展综合系统的研究。(1)通过现场采集煤岩样,开展单轴抗压、三轴抗压、巴西劈裂室内试验,获得了围岩各强度指标和变形指标,分析认为:巷道顶底板泥岩抵抗变形破