基于Hadoop的地质大数据融合与挖掘技术框架

来源 :测绘学报 | 被引量 : 0次 | 上传用户:zmeng1984
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
地质领域数据量大,且种类多样。实现高效的多源异构地质数据的融合与挖掘,是研究地质作用机理,展开地质考察研究的重要手段。然而目前普遍存在着数据条块分割,格式各异,难以实现有效的共享与互操作。为此,本文提出了一种基于Hadoop的地质大数据融合与挖掘技术框架,该框架包括统一的地质大数据采集与预处理方法,基于元数据索引的存储与管理平台,基于Map/Reduce的地质大数据并行化计算模式与系统,面向可重用的地质大数据挖掘服务,以及支持在线三维展示的地质大数据分析结果可视化系统。该框架具有良好的实用性与可扩展性。本文在5个节点的测试系统上实现了多元素关联性分析,并取得了相对应单台机器3部的加速可比性。
其他文献
物理属于高考重要考察学科,学习水平对于高等教育升学意义重大。学生物理解题规范性能够反映学生自身知识技能水平,规范解题对于物理知识应用能力提升具有促进作用,同时对于高考
目的:高考升学体检是国家高等教育招生工作的重要组成部分之一。是一项政策性、技术性很强的工作,是对高考学生健康状况的一次综合测评。方法:通过对西宁城东地区5所中学应考学
doi:10.3969/j.issn.1007-614x.2010.01.023  高龄孕妇(AMA)一般是指孕妇的分娩年龄大于或等于35岁。与低龄孕妇相比,AMA的妊娠过程和致病因素有较多的特殊性,随着社会竞争和生活压力的逐渐增加,人们把大量的精力和时间投入到工作中,平均妊娠年龄和生育年龄推迟,加之助孕技术的发展,导致高龄妇女妊娠、分娩人数每年增加,目前的高龄产妇是20世纪80年代的3倍。由于3
随着社会的发展,时代的不断进步,科技的日益创新,互联网技术对人们的社会生活产生了极大的影响。司法拍卖一直以来都是维护人民合法权益、维护社会正义的场所,受众较多。随着
通过INNOGRAPHY专利检索分析数据库对国内外申请公开的高含盐废水零排放技术领域的相关专利进行检索,并重点分析了高含盐废水零排放技术在全球及中国的专利技术现状,以掌握高
目前国内外有关银杏叶提取物(EGB)对中枢神经系统的保护作用已有较多的报道,如用于Alzheimer's病﹑抑郁症等[1].国产银杏叶提取物舒血宁注射液临床用于脑梗死报道很少,本文
新课标背景下的中职体育教学,教师要培养学生的运动兴趣,促使学生掌握正确的运动技能,并培养学生终身体育运动的意识。而教学模式是体育运动教学的生命线,是将教师、学生和体
最近几年,受干旱影响,我省一些水田地区地下水位下降严重,加上水田相对效益的降低,水田改旱田面积增多。由于水田土壤长期形成的特定生态条件,加上水田地区的农民长期从事水稻栽培
1 概述上腔静脉阻塞(superior vena cava syndrome, SVCS)指由于肿瘤或淋巴结压迫、放疗后纤维化或血栓形成等原因导致上腔静脉狭窄或闭塞后,因上腔静脉回流受阻而出现的一系
一、需要认真思考的几个问题1.带毒种猪是引发猪瘟的主要根源我国猪瘟的持续性感染是相当严重的。妊娠母猪感染后,会发生流产、产死胎和弱仔。据有关报道,妊娠母猪中带毒母猪可