【摘 要】
：
与城镇居民用水相关的各类数据的实时、智能化存储及管理是目前城镇用水管理系统迫切需要解决的问题之一。本论文设计了一种借助云计算平台,通过网络将居民用户端(前端)智能水表获取的用水数据实时地汇聚到数据中心(云端)的存储系统。该系统能实时且准确地将数据存储到云端,解决用水数据的海量存储问题,方便后期进行数据分析处理,为供水部门提供决策支撑,实现用户的收费管理和供水调度。本文为居民用水数据设计了一个数据存
论文部分内容阅读
与城镇居民用水相关的各类数据的实时、智能化存储及管理是目前城镇用水管理系统迫切需要解决的问题之一。本论文设计了一种借助云计算平台,通过网络将居民用户端(前端)智能水表获取的用水数据实时地汇聚到数据中心(云端)的存储系统。该系统能实时且准确地将数据存储到云端,解决用水数据的海量存储问题,方便后期进行数据分析处理,为供水部门提供决策支撑,实现用户的收费管理和供水调度。本文为居民用水数据设计了一个数据存储表,包含有用水量,位置,住户等相关信息。这些信息将以文本的形式生成,为保证生成的文件可进行跨平台读取,增加数据可读性,同时保证获取的用水数据不受字符长度限制,选用了文本文件中以TXT为后缀名的文件存储形式。对此类数据的存储与检索方式进行研究,目的是实现把智能水表中的数据实时的存储到该系统中,提供后期的数据分析需求。本论文基于云平台,使用flume数据采集技术,非结构化数据库HBase、数据缓存技术Kafka以及实时流处理技术Spark Streaming等技术进行存储系统设计。针对来自于前端的居民用水数据,设计实现的实时存储与查询系统经过逐步的优化,该系统不仅实现了用水数据的海量存储,达到了本文的数据存储需求,而且整个系统的检索效率也得到了进一步提高。
其他文献
铜铝水滑石（CuAl-LDH）一直以来受到研究人员的广泛关注。通过将过渡金属铜离子引入到LDH的层板上,赋予了其优异的结构与性能。本文以CuAl-LDH为研究对象,分别研究了CuAl-LDH的
网络控制系统(Networked control systems,NCSs)是使用通信网络将分布在不同地域的传感器、控制器和执行机构等工作单元连接在一起从而形成的空间分布式闭环控制系统。NCS凭借其组装灵活、易维护、连接方便等特点在诸多领域不断推广,但是受数据流量变化不规则和带宽因素的影响,使得信号在传输的过程中总会伴随数据丢失和时滞等随机现象。随着计算机网络引入,系统复杂度增加,并且还会面临由网
随着经济社会生活互联网化程度的不断提升,互联网保险的创新发展也进入了升级阶段。一方面,互联网的快速发展推动着保险市场业务模式的不断创新;另一方面,传统保险业在市场的探索中不断发现新的商机,渴望借助先进科技手段通过对传统价值链的升级改造来推动市场均衡发展。本文所研究内容正是基于上述的互联网+保险的大背景,对公司内需求类型进行细分,统计发现第三方互联网平台对接项目在每年新增需求中占比最重且管理过程中矛
SOLO(Structure of the Observed Learning Outcome——可观察的学习成果结构)分类评价理论为澳大利亚心理学家约翰·比格斯(Biggs)及其同事凯文·科里斯(Collis)1982年所创立,把学生的知识和能力发展水平分为5个等级。该评价法能够更好地反映学生语言知识的掌握及语言的使用情况,因此可以更直观、准确地体现学生的语言能力发展水平。目前,此评价方法尚未广
K-means聚类算法适用于小规模和低维度数据集,对于高维度大规模的数据集,其聚类精度明显下降,计算时间明显加长。k-means聚类算法运行前必须事先给出聚类k值,其聚类结果对初始聚类中心点的选则具有很大的依赖性和随机性,并且极易受噪声点的干扰导致聚类结果不准确。针对K-means算法这些缺陷,论文提出了一种基于属性加权的PWPCA-KDKM改进算法。论文提出的PWPCA算法将主成分分析(PCA)
马梨形虫病是一种由马泰勒虫(Theileia equi)和驽巴贝斯虫(Babesia caballi)寄生于马属动物血液红细胞的血液原虫病。临床症状主要为溶血性贫血、黄疸,症状严重时可造成患畜死亡。本病曾被列为中国二类动物疫病,目前是国际动物卫生组织(OIE)必须报告的疾病之一。感染梨形虫病的马匹如果未能及时诊断治疗,则会对养马业造成重大损失。目前,世界各国虽然在马梨形虫病的诊断新方法进行了大量的
我国农业现代化转型进程中,土地流转应时代需求随土地制度变迁而生,“三权分置”的提出与逐步完善,对公正权衡土地流转双方权益起到了重要支持作用,稳步实现我国农村土地制度适配性变迁。在“三权分置”思想指引下,农村土地承包权与经营权相剥离,以土地流转为基础的农地抵押融资作为以农业生产所必须的土地经营权为抵押物的特殊抵押方式,成为缓解农业经营主体融资压力的重要金融手段受到广泛关注。但受外部环境制约,政府支持
安徽DE建筑工程有限公司位于合肥市裕溪路与南陵路口 1060号,注册资金为23941.73万人民币,专业技术人员780人,净资产1.5亿元,公司目前拥有一级资质2项,分别为市政公用工程施工总承包和房屋建筑工程施工总承包,拥有二级资质6项,分别为钢结构、装修装饰、机电设备安装、幕墙、起重设备安装及消防设施工程。为确保DE公司SX安置房项目工程质量,提高企业竞争能力,对商品混凝土供应商进行选择势在必行
在城市高速发展过程中,土地紧缺问题日益加剧,地埋电缆以其占地面积小的优点逐步取代架空电缆成为电缆敷设的主要方式。在地埋电缆投入运行过程中,定期的电缆安全维护能够有效降低故障发生率,但是在电缆敷设、运行以及维护过程中由于操作失误或外力破坏造成电缆故障的情况仍然存在,如果无法及时地找到电缆故障点并进行处理,会给人民的生产生活带来不便和经济损失。因此,本文深入研究了在非运行状态下的电缆故障检测方法,分析
氮、磷是导致采煤沉陷区水体富营养化的限制因素,研究底泥与周边土壤对氮、磷的交互作用是判断采煤沉陷水域富营养化趋势的重要证据。而粘土矿物是土壤和底泥中的重要组成成分,因此,弄清采煤沉陷区粘土矿物对氮、磷的吸附机理具有重大意义,为讨论沉陷积水区的富营养化潜能和保护水资源环境提供了理论依据。本文分别选取淮南潘集矿土壤和底泥,孙疃矿土壤和涡北矿底泥为研究对象,用X射线衍射法对土壤和底泥样品中提取出的粘土矿