【摘 要】
：
随着电子商务网站的访问量和交易量越来越大,业务类型和工作流程越来越复杂,对数据价值的探索越来越深入,现有的商业智能分析软件无法高效处理海量数据,或者无法完全满足企业
论文部分内容阅读
随着电子商务网站的访问量和交易量越来越大,业务类型和工作流程越来越复杂,对数据价值的探索越来越深入,现有的商业智能分析软件无法高效处理海量数据,或者无法完全满足企业的需求。本文设计并实现了一个基于Hadoop的一站式电子商务数据统计分析系统,以应对海量数据智能化处理分析的挑战。Hadoop是Apache基金会开发的一个开源分布式计算平台,以分布式文件系统HDFS和并行计算模型MapReduce为核心,为用户提供了系统底层细节透明的分布式技术架构。按照流程本系统主要由四个核心部分组成:ETL(数据提取、转化、加载)、数据建模、OLAP(在线分析处理)和数据可视化。我们将传统关系型数据库中的数据抽取出来,经过数据清洗和转换,存放到Apace Hive数据仓库中。根据企业定制化的需求,我们对数据仓库中存储的数据进行逻辑建模,寻找数据之间的关联性,利用Hive分析处理数据并封装为满足业务需求的数据集,导出到可视化BI软件Tableau中,为网站管理者提供决策支持。
其他文献
基于2005-2014年中国与"丝绸之路经济带"国家农产品贸易的面板数据,运用引力模型,从GDP、人口、地理距离、人均GDP差额、制度安排等方面对中国与其贸易流量和潜力进行分析、
目的:观察华佗夹脊穴埋线法治疗脑卒中偏瘫肢体痉挛的有效性。方法:选取符合纳入标准的60例病例,按机随数字表法分为治疗组和对照组,每组各30例。治疗组予华佗夹脊穴埋线法治
<正> 首先,对资产阶级民主、自由要有一个正确的认识。对资产阶级的民主、自由通常看法是:资产阶级革命时期,用资产阶级的民主、自由与封建主专制独裁相抗衡,起着积极的进步的作用,而当资产阶级取得政权之后,民主、自由则就完全成为虚假的了。这种认识是片面的。资产阶级取得政权前后,对待民主、自由的态度有很大不同,但并没改变民主、自由不仅是反封建斗争同时能够促进社会化大生产和发展商品经济的基本特征。社会生产过程愈复杂,商品经济愈发展,也就愈需要决策的民主化、科学化,愈需要实行人人平等自由原则。所以对
创新能力培养是理工学校教育教学的核心内容,产学研合作教育是培养理工科创新型人才必由之路,把产学研项目和大学生创新基金进行＂大与小＂的项目结合,为提高大学生创新实践能力
骨髓细胞形态教学是临床血液学检验课程的重点和难点,教学中面临形态学的特殊性、学时减少、教学效率低、共享性与互动性差等诸多问题。为适应移动终端设备在教育教学中的应
【正】 在《中共中央关于科学技术体制改革的决定》指引下,在国务院《关于促进科技人员合理流动的通知》和《关于进一步推进科技体制改革的若干规定》等一系列促成人才合理流
目的探讨坚同内固定加颌间牵引治疗颌骨骨折的治疗措施及临床疗效。方法选取我院2008年1月－2011年12月颌骨骨折患者24例为观察对象，根据患者病情分析坚固内固定加颌间牵引治疗
文章作者通过对突发性环境污染事故应急监测质量管理工作的关键环节进行论述,并提出相应的建议和措施,以提高环境应急监测数据的及时性、准确性和可靠性,确保为环境突发性应
<正>人力资源是个大行业,人力资源外包、招聘、培训等等都是充满机会的领域。人才的竞争变得越来越激烈,而招聘是获取优秀人才的第一个关键环节。国内前三位的招聘网站前程无
《大学化学》是教育部主管、北京大学和中国化学会共同主办的教学类刊物,本刊以促进深化大学化学教育改革为宗旨,为促进教师知识更新、扩大学生知识面、提高化学教学水平服务