基于大数据的水利数据中心建设

来源 :2015(第三届)中国水利信息化与数字水利技术论坛 | 被引量 : 0次 | 上传用户:backpacker
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息技术在水利行业应用的日趋广泛,水利信息化采集、分析、业务处理等方面产生的数据量急剧膨胀,现代水利数据中心的建设需求随之变得更加迫切.利用大数据技术,可高效的存储和处理水文、水利工程监测等长系列数据以及文档、图片、视频等非结构化数据.本文通过总结水利大数据的特点以及大数据架构、实时数据处理和元数据等关键技术,提出基于传统关系型数据库与分布式文件系统相结合的、支持实时计算和元数据管理的水利数据中心架构.分布式文件系统、实时数据处理组件的引入,可满足多源、多结构水利数据统一存储和处理的需求。而以MapReduce为代表的大数据处理技术,可突破传统数据分析的视角,以截然不同的方式分析海量水利数据,其成果展示方式也将随之改变。随着大数据技术在水利行业不断地深入应用,行业用户的思维方式将迅速转变,越来越多的应用需求也将随之涌现,基于大数据技术的水利数据中心的研究范围和深度也将得到极大的提升和拓展。
其他文献
采用深度还原-磁选工艺处理湖北官店的高磷鲕状赤铁矿石,考察了还原温度、还原时间和配碳系数对还原指标的影响,以及温度对还原产物微观形貌的影响。结果表明:在还原温度1 20
<正> 1 对试题的评价 1.1 试题的覆盖面广,重点突出 全卷的双项细目表如表1所示,从表1中可以看出试题的覆盖面广,重点突出,各部分所占的比例基本上符合《1995年高考物理科考
通过化学分析、X射线衍射(XRD)分析、扫描电镜(SEM)分析等检测方法,对某鲕状赤铁矿深度还原矿进行了组成特性研究,查明了Fe元素的赋存状态,并根据其组成特性制定了相应的选别
<正> 作者从日本产葛Pueraria thunbergiana Benth。及中国产粉葛P.pseudo—hirsuta Tang et Wang和甘葛P.thomsonii Benth. 等三种根的甲醇浸出物,用铅盐法处理,提得下列几
在扩大内需的大背景下,国内学者提出了通过完善农村消费信贷从而提升农村消费的设想,但其理论多着眼于消费信贷的供给规模调整。本文通过建立不同期限消费信贷的经验模型发现
<正> 在惩治腐败的过程中,人们开始越来越关注外逃的现象。贪官外逃这是中国经济成长中无法避免的阵痛,还是政府行政管理中的漏洞?而贪官为什么贪而逃屡屡得逞?这是一个不能
鲕状赤铁矿是我国一种重要的铁矿石资源,但由于其组成结构特殊,采用常规选矿的方法尚不能实现有效分选。采用深度还原与分选工艺处理某鲕状赤铁矿石,通过试验确定了深度还原
针对物流系统中安全库存决策问题,以分拨中心库存为核心,建立物流系统的多级库存结构的分析模型,采用BPMN为描述手段分析多级库存系统的业务流程模型,开发Arena模拟平台上的
天然橡胶产业是云南省传统优势特色产业,现已建成了我国最好的天然橡胶生产基地,植胶面积、总产量和单产水平均居全国第一,形成了集种植、生产、营销和科研等较为完善的产业
传统上,对于教育与教育学的关系,人们只是简单地认为"教育"是"教育学"的研究对象。这种判断是正确的,但毕竟失于简单。无论是历史上还是现实中,教育与教育学的关系都更加丰富