基于Hadoop的地质信息管理系统

来源 :中国矿业大学 | 被引量 : 0次 | 上传用户:backbone09
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
地矿工作历史悠久、意义重大,地矿行业多年来所积累的数据资料信息,是名副其实的“地质大数据”,面对海量的地质数据,如何根据社会需求,实现多源异构数据的共享和互操作、挖掘提取最有价值的信息,是大数据时代地质考察研究的核心内容之一。本论文在对国内外地质大数据存储的相关数据资料及软件系统深入研究的基础上,结合实验区煤矿的地质数据的实际情况,并基于分布式文件系统HDFS、分布式数据库Hbase和数据仓库Hive,对地质勘探数据进行了存储和地质信息的管理。Hadoop平台中的Map Reduce可对海量的数据进行并行计算,极大地提高了数据间的相关性。并且对实验区的地质数据进行了采集和整理,并在分布式文件系统HDFS进行了地质数据的读写;其次通过分布式数据库Hbase对文件系统的数据进行了存储,Hbase是通过列对地质数据进行存储。此外,基于数据仓库Hive,对文件系统HDFS中的数据进行了存储。Hive通过自身的HQL语言对文件数据进行存储,把它映射成一张张外部的数据表,便于存储分析。还详细介绍了实验区地质数据在Hive中的存储的表结构和在数据仓库中存储的地质数据表以及通过shell命令行进行不同的地质数据的分析查询,实现了对地质数据的更加方便高效的管理。最后,通过Hadoop大数据平台,设计并编程实现了一套针对地质数据查询和增删改查操作的地质信息的管理系统,也实现了对地质数据的查询和报表输出等功能。登录系统时,可以通过对用户权限的设置,如果不是管理员用户,则不能对地质数据进行增删改查的操作。该系统它分为地质数据浏览、地质数据管理和其他功能三个模块。以上模块的功能可以对数据进行查看和基本的增删改操作以及报表输出,实现了对地质数据的管理。论文有图56幅,表10个,参考文献80篇。
其他文献
不结球白菜(Brassica rapa L.ssp.chinensis)又称小白菜、油菜、青菜等,是以地上部茎叶为产品的二年生植物。不结球白菜栽培历史悠久,范围广泛,营养价值高。江苏是不结球白菜
韵律在言语交际中不仅可以传递语言信息,更能表达大量的副语言信息,传递说话人的态度等。对此Ohala提出频率代码(Frequency Code),认为不同语言之间韵律表达的意义具有普遍性。基于此有学者进行了跨语言的态度韵律研究,通过对比不同语言背景被试,表明态度韵律的感知即有跨语言的普遍性也受到母语背景的影响。但是在已有的成果中缺乏关于中国学习者对英语态度韵律的感知研究。基于此,本文以英语母语者为参
目的:评估瘤体及瘤周区的扩散加权成像(DWI)或动态磁敏感对比增强灌注加权成像(DSC-PWI)在鉴别胶质母细胞瘤异柠檬酸脱氢酶(IDH)基因分型中的应用价值;同时探讨联合两项技术分别在
近年来,小尺寸(
醇类选择性氧化是精细化学品生产过程中的一个重要分支,通过选择性氧化反应可以制备多种醛类和酸类衍生物,在生命科学和有机合成中间体等领域中具有十分广泛的应用。由于短链
磁流变抛光技术是利用磁流变抛光液在磁场中流变性进行抛光的一种超精密加工方法,磁流变抛光液质量对半导体工件抛光的速度和效果有很大影响。由于抛光液内部的固体颗粒和基载液密度差异,磁流变抛光液在抛光过程中两相受力不同,出现固体颗粒分布不均匀,即固液分离现象,严重影响抛光液的使用寿命和工件抛光效果。本文针对磁流变抛光液固液分离问题,研究多孔介质及各抛光参数对抛光液流动性及固液分离的影响规律,从理论角度分析
癌症对于人类健康的问题仍然是一个主要威胁,单一的化疗已不能获得较好的治疗效果。光热疗法作为一种无创、相对安全的治疗手段,在肿瘤的治疗领域与化疗协同治疗癌症的方法引起了广泛的关注。然而现有的光热试剂大多与化疗药物一样通过包埋,导致药物负载率降低。基于此,本文创新地合成了丙烯酰化的花菁染料(MACyanine),其具有近红外光刺激诱导的光热效应。其可通过可逆加成-断裂链转移聚合(RAFT)作用连接到聚
在氧氮分离技术领域,膜分离技术具有成本低和节能环保等诸多优势。在众多分离膜材料中,MOFs(金属有机骨架)混合基质膜兼具了聚合物材料良好的机械性能与MOFs优良的气体分离性能
在有限群论的发展过程中,人们发现某些特殊子群的性质与群的结构存在着密切的关系。许多群论学家围绕着这一问题进行了研究,尤其是利用Sylow子群、极大子群、极小子群的可补
多相流普遍存在于自然界和工农业生产中,深入研究多相流在不同条件下所产生的现象和运动规律,对提高工农业领域的生产效率和安全性以及维持生态平衡都具有十分重大的意义。晶