HaoLap:基于Hadoop的海量数据OLAP系统

来源 :计算机研究与发展 | 被引量 : 0次 | 上传用户:lutaixiaoxin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着计算机技术的发展及其在互联网、传感器和科学数据分析等领域的广泛应用,数据量爆炸性地增长,海量数据给传统的数据管理和分析带来新的挑战,学界和业界广泛采用分布式文件系统和MapReduce编程模型来应对这一挑战.介绍了HaoLap(Hadoop based OLAP),一种基于Hadoop分布式文件系统(HDFS)和MapReduce编程模型的海量数据OLAP系统.本研究吸取了MOLAP的经验:采用元数据存储多维模型以及HDFS存储事实数据,采用编码完成维和事实数据的映射,采用MapReduce完成OLAP运算.描述了HaoLap的关键技术,包括系统结构、维定义和编码、事实数据存储和编码、OLAP算法和服务接口.介绍了HaoLap在科学数据分析的应用案例,并与主流非关系数据管理系统进行性能对比.实验结果表明,尽管数据装载性能略显不足,但HaoLap的OLAP性能要优于HBase,Hive,HadoopDB等主流非关系数据管理系统.
其他文献
此文在疏理相关史料的基础上,从历史地理学的角度,对历史时期西南地区的温泉进行了系统的总结,从而得出以下结论:历史时期西南地区温泉的分布,在明朝之前,主要分布在四川地区
<正> 一、发病情况:商丘市工农养鸡公司为郊区个体户联办养鸡场,共养品种鸡希塞斯1700只。1984年11月初鸡群开始发病,偶有个别鸡出现流鼻液,打喷嚏等症状,没有及时治疗,到该
以农业上市公司为研究对象,采用多元回归模型实证分析内部控制质量对投资效率的影响。结果表明,内部控制能够有效抑制企业的投资不足与投资过度的行为,从而提高投资效率。进
在国民经济整体发展良好的背景下,内燃机行业市场的稳定发展,使我国气缸套行业继续保持快速的增长势头。从2007年上半年统计数据显示,气缸套行业共完成工业总产值224870万元,生产
以微生物絮凝剂MBFX-8、羧甲基壳聚糖CMC和磁性Fe3O4为原料,制备了新型MBFX-8/磁性Fe3O4@CMC复合絮凝剂。采用FTIR和XRD对新型复合絮凝剂进行表征。结果表明,羧甲基壳聚糖(CMC
目次一内容关联的甲骨大多相距较近二内容关联的甲骨部分相距较远三内容不同的甲骨部分相距较近四内容不同的甲骨大多相距较远五几点推测我们曾在《花东·前言》[1]及《论殷
一种链板式三工位红枣自动去核机,最大特点在于其传动装置为不完全齿轮机构。链板式输送带速度提高时,抖动增大,不利于红枣定位。附加瞬心线板的不完全齿轮传动机构能够提高
目的检测胃腺癌中SOX18蛋白(SOX18)、基质金属蛋白酶2(MMP-2)和基质金属蛋白酶14(MMP-14)的表达特点,关注三者的协同作用及在不同临床特征中的表达差异,以期为临床工作提供理
乔治·艾略特在其作品中塑造了一批与众不同的吉卜赛人形象,并借他们表达了强烈的文化叛逆意识。艾略特作品对神秘的吉卜赛文化进行了揭秘,还表现出对西方主流社会对其丑化的
职务犯罪侦查逻辑思维系统工程是指在侦查职务犯罪整个活动过程中应用泛逻辑思维的体系结构。侦破职务犯罪案件的思维活动系统是一个多环节、多层次、多点线的相互联系、相互