【摘 要】
:
随着移动互联网的发展和普及,越来越多用户选择网约车服务作为出行的首选,互联网企业也因此收集了海量的数据。用户在享受移动出行服务中产生的数据被存储在数据仓库中,用以
论文部分内容阅读
随着移动互联网的发展和普及,越来越多用户选择网约车服务作为出行的首选,互联网企业也因此收集了海量的数据。用户在享受移动出行服务中产生的数据被存储在数据仓库中,用以支持分析和决策,然而基于Hive的数据仓库存在查询速度慢、操作复杂、元数据和指标意义不清晰、数据质量无法保证等问题。数据服务化系统为了让数据更好的为用户服务,让用户更好的使用已构建好的数据仓库,提供以下服务:利用HBase查询速度快但是不支持复杂Join的特点,提供实时查询数据集市中数据进行联机分析处理(Online Analytical Processing,OLAP)服务,解决用户使用Hive查询速度慢的问题;数据仓库元数据和指标查询,让用户不必为报表中的指标和元数据意义不明确而困扰。同时,由于数据仓库中数据需要业务人员基于业务数据进行二次开发,本系统为数据仓库业务人员提供以下服务功能:保证数据质量,维护数据的一致性和准确性;元数据的创建和维护;HBase中数据立方体的构建,实时查询用于支持OLAP。保证数据仓库业务人员在日常工作中顺利的产出数据。按照需求分析和功能划分,系统共有元数据中心、指标字典、数据服务化配置中心、报表系统四个模块。系统采用四层架构模型降低了系统各模块之间的耦合度,采用My SQ作为业务数据库和HBase作为No SQL数据库,并最终根据测试结果和用户反馈不断进行迭代优化。数据服务化系统已在企业内上线运行,帮助普通用户解决日常工作中使用数据仓库遇到的问题,帮助数据仓库业务人员更高效的进行数据开发,保证数据质量,让数据可以更好的为用户服务。
其他文献
<正>笔者的老家系上杭县南阳镇新联村(石胆窝),在1929年革命烽火年代是苏区新杭县的一个革命基点村,全村80%左右的青壮年参加了红军闹革命,我大哥黄炜华就是其中之一。2012年
有关上市公司资本结构与其绩效之间的关系受到学者越来越多关注,但是对其进行分行业实证研究的文献并不多见。本文选取我国航空工业上市公司的截面数据进行实证分析表明,其资
初中生物学常规教学模式很容易受到时间和空间的限制,使学生不能很好的学习新的知识。随着"互联网+"时代的到来,"互联网+教育"的模式使初中生物课堂更加开放,学生眼界更宽广,
在众多网络舆情领域中,金融舆情反映了人民群众最为直接的现实利益问题,是民生问题的重要表现。随着网络媒介的发展,网民的金融事件观点能够通过社交网络平台迅速发酵。已有
随着中越边贸的发展,"地摊银行"逐渐壮大。"地摊银行"在一定程度上缓解了滇越经贸交往中结算手段不足的问题,扩大了双方经贸往来,但同时其也冲击了银行边贸结算业务的发展,造
为开发出能更好适用于桥梁隔震的支座,对方形铅芯橡胶支座进行了力学性能试验,并与铅芯橡胶支座力学参数理论公式计算的结果进行了对比,吻合较好,从而为方形铅芯橡胶支座的设
目的探讨麻醉对患者记忆功能的影响,为采取干预措施提供依据。方法应用行为记忆测验第二版(RBMT-Ⅱ)对普通外科择期手术患者手术前后进行记忆功能评测,对比分析。结果 233名
西服面料主要选择轻薄型精纺毛织物和毛混纺织物。面料的性能对西服在裁剪、缝纫、造型方面有极其重大的影响。本文主要介绍轻薄型精纺毛型织物性能的分析以及研究方法。
<正>目的调查普通外科重症患者真菌性败血症的菌群分布。方法回顾分析2001年1月至2008年11月我院普通外科重症监护中心真菌性败血症的流行病学资料。结果2001~2008年发生真菌
本文综述了一种基于照相技术的计算机辅助织物视觉评价装置,以及用该装置评定织物起球和折痕恢复的图像处理方法。并将由该装置评定的结果同纺织专家系统给出的结果进行了比