【摘 要】
:
在大数据时代,具有海量数据存储能力的HBase已被广泛应用。HBase只对行键进行了索引优化,对非行键的列未建立索引,这严重影响了复杂条件查询的效率。针对此问题,提出了基于内
【机 构】
:
重庆大学计算机学院,重庆城市综合交通枢纽开发投资有限公司
【基金项目】
:
国家863计划项目(2015AA015308);国家重点研发计划项目(2016YFC0801707);重庆市应用开发计划重点项目(cstc2014yykfB30003)~~
论文部分内容阅读
在大数据时代,具有海量数据存储能力的HBase已被广泛应用。HBase只对行键进行了索引优化,对非行键的列未建立索引,这严重影响了复杂条件查询的效率。针对此问题,提出了基于内存的HBase二级索引方案。该方案对需要查询的列建立了映射到行键的索引,并将索引存储在Spark搭建的内存环境中,在查询时先通过索引获取行键,然后利用行键在HBase中快速查找对应的记录。由于列的基数大小和是否涉及范围查询决定了建立索引的类型,故针对三种不同情况构建了不同类型的索引,并利用Spark内存计算、并行化的特点来提高索引的查询效率。实验结果表明,该二级索引具有较好的查询性能,查询时间小于基于Solr的二级索引,可以解决HBase中因非行键的列缺乏索引导致查询效率较低的问题,提高基于HBase存储的大数据分析的查询效率。
其他文献
一、哈尔滨农田水利灌区的发展现状农田水利工程的建设十分复杂,相关部门必须予以重视。从哈尔滨近几年的现状来看,确实取得了一定的进步,但仍然存在一些问题。为了让哈尔滨
随着新课程改革的不断推进,传统的应试教育逐渐转变为素质教育,旨在全面提高学生的综合素质与能力。基于此,教师需要不断反思与总结教育经验,通过教学方式的创新和教学内容的
Ce0.6Zr0.4-xTbxO2-y固溶体 溶胶-凝胶法 BET比表面积 XRD XPS 中文摘要 采用溶胶-凝胶法制备了不同比例Tb掺杂的三效催化剂促进剂Ce0.6Zr0.4-xTbxO2-y(x=0.05、0.10、0.15)
摘 要:随着互联网的迅猛发展,网络资源在各行各业中被充分利用,推动了各行业的进步和发展。小学语文是基础教育阶段的重要组成部分。教师如果能充分利用网络资源对小学语文教学的内容和形式进行全方位的优化,将会使小学语文教学的效果和质量得到全方位的提升。本文围绕如何利用网络资源优化小学语文教学展开研究和探讨,以期帮助教师在小学语文教学中更好地利用网络资源。 关键词:网络资源;小学语文;优化教学 中图分类
在中日韩三国语言中,都存在着表记为"茶礼"这样一个词语。但是,不仅其读音各不相同,而且其含义亦明显各异。"以茶为祭""以茶待客""以茶为赠"既是东亚地区自古以来用茶为礼的
以草酸乙醇水溶液反萃Zn-P2O4-CCl4组成的有机相中的锌离子获得草酸锌前驱体,经450℃条件下煅烧得到的氧化锌粉体。结果表明,有机相中P2O4浓度的增加、无机相中草酸浓度的降低
目的探讨心理干预在慢性白血病患者焦虑抑郁情绪干预的效果。方法将清远市人民医院收治的86例慢性白血病患者随机分为观察组与对照组,每组各43例,对照组患者进行常规护理,观
随着现代教育教学改革的持续稳步推进,生活化教学已经贯穿到初中数学教学的各个环节,教师应在日常教学中积极更新教学理念,充分认识生活化教学的重要性,无论是课前导入还是课
随着社会的不断发展,越来越多的科学信息技术被应用到教育领域。微课在初中生物教学中的应用,不仅丰富了初中生物教学的内容,实现了教学方式的多元化,提升了生物学习的趣味性
以基于季戊四醇的二代硅碳烷树状氯化物PCSi-2G-Cl为脚手架、4-硝基-4’-羟己氧基偶氮苯(M-NO2)为介晶基元,合成了以季戊四醇为核、端基含36个硝基偶氮苯的新型硅碳烷液晶树状物