基于大数据平台的云端应用行为分析研究

来源 :中国石油大学(华东) | 被引量 : 0次 | 上传用户:WSLBCW
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着企业信息化、智能化建设的不断加快,越来越多的应用系统在企业中广泛应用,如何以最小的切入方式来评估各类应用系统的运行情况、安全状况成为各企业关注的重要问题。在使用这些应用系统的同时,一些访问信息会被记录下来。通过分析应用产生的行为数据可以挖掘出用户的访问喜好、应用系统潜在的安全问题,进而为各类应用的评估提供重要依据。然而随着各类应用产生的数据量剧增,仅依靠单机环境对海量数据进行分析与挖掘已经无法满足企业业务的需求。在此背景下,本文将应用行为分析与大数据处理技术相结合,研究应用行为分析的相关方法理论,并基于Spark计算框架设计了应用数据的预处理和应用行为分析算法,该方法提高了海量数据处理的效率;同时基于LSTM对应用的使用量进行了预测。此外论文还研究了海量应用数据的收集方法,面向不同类型的数据设计并实现了数据收集系统。在数据储存方面,基于HDFS实现了日志文件的储存管理,基于HBase设计了面向海量应用行为数据存储模型;在各类大数据框架的集成方面,设计了大数据分析引擎完成了对各类框架的调度管理。在系统的架构上采用了基于Spring Cloud微服务的架构方式,将不同技术栈的业务系统独立设计为单个服务,以此来保证业务系统服务的高可靠性和稳定性。基于上述研究内容和成果,本文设计并实现了应用行为分析的大数据平台。该平台能够对海量应用数据进行对多维度的行为指标统计、应用安全检测以及应用访问量的预测,同时系统还提供了可交互数据分析功能,让用户自定义数据预处理和分析流程来实现对应用数据的挖掘与分析。经实验验证系统具有较高的可扩展性和数据分析效率,解决了企业处理海量数据的滞后性难题,为企业管理各类应用提供了决策依据。
其他文献
4月30日上午,习近平总书记出席纪念五四运动100周年大会并发表重要讲话,他对中国青年寄予厚望并提出了六点要求,即:新时代中国青年要树立远大理想;新时代中国青年要热爱伟大
期刊
蹲立式起跑一般用于田径项目短距离和接力项目。采用蹲立式起跑技术,对于运动员个人身体素质要求比较全面。其中,重点在下肢力量瞬间爆发和蹬离起跑器用力先、后顺序,在教学
实施绩效管理是促进高校教师工作积极性的重要手段,为了提高高校教师的工作积极性,高校必须加强对绩效管理进行优化,以科学性、准确性为原则,并制定相对完善的绩效考核反馈制
南京市小营小学建于1952年,前身为华东军区空军干部子弟学校。学校秉承“呵护童真、激活童趣、滋养童心,用智慧启迪儿童、用爱心成就儿童”的教育理念,以“有了爱,就有了一切
中华民族文化丰富,传统体育项目诸多,且至今仍被广泛流传于民间,受到群众的喜欢和实践,成为各民族生活中的重要组成元素。民族传统体育文化底蕴厚重,群众基础牢固,且多以娱乐
知识经济时代,知识工作者在企业中占绝对地位,他们是企业发展和创新的核心力量,研究探讨知识工作者的激励问题,对于企业以及知识工作者的个人发展都有着重要的意义。笔者就此
目的研究渐进延长缺血后适应(IPostC)改良再灌注对ST段抬高型心肌梗死(STEMI)患者经皮冠状动脉介入(PCI)术中心肌缺血再灌注损伤(MIRI)的影响,进一步探索最佳缺血后适应模式,最大限度地减少再灌注损伤,改善患者预后,以期将其作为常规心脏保护性干预措施应用于急诊PCI中。方法本研究为多中心前瞻性随机对照试验。选择2019年5月至2020年1月在重庆医科大学附属大学城医院、陆军军医大学附
初中'图形与几何'学习困难是指初中学生的智力正常,但'图形与几何'内容学习效果低下,达不到国家规定的教育大纲要求,最终导致学习结果不良。本文依据加涅对
共欢新故岁,迎送一宵中。当一家人一起吃年夜饭,一起守岁,享受天伦之乐、生活之美时,公交驾驶员依然手握方向盘,自清晨至夜晚,穿行在城市的大街小巷。正是因为他们的坚守,保