物联网平台分布式数据融合管理的研究与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:yongheng0106
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着物联网的发展,感知设备在数据融合、信息交互、数据共享等技术的支撑下,创新出了多样的上层智能物联网应用。这些应用的底层监测终端设备来源于各行各业,产生了庞大且复杂的数据,然而因不同种类的数据监测终端所应用的信息交换标准不统一,造成了各行业数据大量堆积、难聚合,难共享,阻碍了关联各行业的智能应用的发展。如何对数据进行高效融合处理、快速查询、完成数据共享、并保证数据可靠是本文重点研究内容。本文以物联网平台多源感知数据为例,设计并实现了分布式数据融合管理系统。论文主要工作如下:1)设计了数据融合平台。平台可接入多种不同标准的监测终端,并对监测属性名依据其含义重新定义名字,进行统一格式转换、实现数据表属性与格式一致化,同时定义了严格的语法和转换规则检查机制,实现数据高效融合处理。2)设计了分布式实时库管理子系统。针对分布式物联网数据存取需要强实时性与一致性的要求,分三个层次实现:第一,对实时库数据切片完成启动、分布部署、管理以及邻居内存库数据对齐;第二,对库结构进行增删改查、实时刷新,通过组播应答方式保证强一致性,即用户任意时刻都可查到最新数据;第三,数据更新后对邻居广播,每个切片订阅相关修改并自动更新来保证弱一致性,即一段时间后邻居相关切片会逐渐达到一致状态且容忍部分数据丢失。3)设计了分布式数据融合管理架构。针对数据存储位置多样,用户读写困难的问题,设计了客户端代理与分布式集群。客户端代理将用户请求路由到分布式节点,并对上层透明。分布式集群实现读写分离、主从备份、异地灾备,减轻了单节点存储压力、实现负载均衡、保障数据可靠。针对实时数据总量庞大的问题,设计了数据采样,利用内存快照方式存储历史数据到持久化库,压缩数据总量。最后为管理人员提供了一种中心管理架构,负责统筹管理整个系统,提供所需配置下载、更新并监测各个模块的正常运行。最后,本系统在集群环境中实现了分布式数据融合管理系统的所有功能。并对系统各个模块的功能与性能进行了测试,测试结果验证了系统的可用性、可靠性和稳定性。
其他文献
近年来,随着互联网、云计算等技术的迅速发展,越来越多的服务被部署到互联网上,服务计算领域随之飞速发展。其中,服务组合是对现有Web服务进行组合复用以创造新服务的技术,mashup为其实现形式之一。该技术能更加方便快捷地实现对现有服务的重用,从而应对用户的个性化需求。随着互联网上服务数量的快速增长,如何推荐合适的服务用来组合越来越成为一个迫切需要研究的问题。由于服务组合往往遵循特定模式,因而可以从已
在信息技术不断发展的今天,软件无线电(software defined radio,SDR)随之诞生,它是一种利用软件来主导硬件电路的无线通信技术。其中,软件提供主要的通信功能,而硬件设备仅作为通信平台,因此其不必随系统的更新而被淘汰。然而,SDR系统需要极高的信号采样率,受限于现今的硬件水平,后端的硬件设备无法处理速率极高的信号,此时就需要降低初始信号的速率,而数字下变频(Digital dow
占有作为一项制度,在我国民法当中出现的较晚、发展相对较为缓慢。一直到2007年《中华人民共和国物权法》(以下简称《物权法》)的出台,占有制度才正式确立下来。《物权法》第
随着经济不断发展,科学技术不断进步,人们越来越重视农村社会治安综合治理问题,它已经成为中国社会发展研究史上的重要内容。中国是农业大国,农村人口占全国总人口70%以上,只有农村社会稳定,全国社会才有可能稳定。本文致力于农村社会治安综合治理的相关研究,无论是对提高农村社会治安综合治理水平,改善治安现状,还是对解决农村矛盾、促进农村社会和谐、改善农民生活以及农村全面发展都具有非常重要的意义。本文以高安为
本翻译报告选用心理传记《生命之光闪耀:鲍勃·迪伦的蜕变》一书作为源文本进行翻译。该书从心理学角度分析了鲍勃迪伦人生中的三次转折。本人对此心理传记的第二章和第三章进行了翻译,并根据翻译中使用到的理论和技巧撰写了本篇翻译报告。本报告以彼得·纽马克的语义翻译和交际翻译理论为指导,对翻译过程进行了阐述。本报告在原文文本和翻译文本中选取适当案例,对翻译过程中词和句的翻译技巧做了分析和解释。本报告分为三个部分
在党中央、国务院的高度重视和大力支持下,在地方各级党委、政府和有关部门的积极合作下,我国土地整治项目的数量和投资规模较以前明显增加,这不仅促进土地利用方式的转型和土地管理事业的整体进步,同时也日益成为“保发展、守红线、促转型、惠民生”的重要抓手和基本平台,对促进城乡协调发展、推进生态文明建设发挥了重要作用。2011年以来,海口市通过《海口市土地整治规划(2011-2015年)》的实施,增加了耕地面
目的:1.调查杭州市儿童医院2016年1月-2018年12月期间感染科收治临床诊断为手足口病(Hand,foot and mouth disease,HFMD)的肠道病毒感染情况;了解杭州市手足口病肠道病毒的病
国内外的先进经验表明,高速公路的建设情况可以反映一个国家和地区的交通发达程度甚至经济发展水平。本文首先对国内外高速公路项目代建制应用现状进行阐述,然后基于国内外文
背景和目的:排斥反应是器官移植术后影响移植物长期存活的最主要因素,有效地预防及治疗排斥反应一直是器官移植领域研究的重点。目前针对排斥反应的药物主要包括:激素类,钙调磷酸酶抑制剂,霉酚酸酯类和雷帕霉素等,虽然这些药物对维持移植物功能,延长移植物存活时间具有重要的作用,但仍无法避免排斥反应的发生,甚至对部分排斥反应无效,且目前这些药物大多是无选择性地抑制淋巴细胞,容易导致骨髓抑制、感染等严重并发症[1
随着无线通讯系统的改进与完善,微带天线是现代通讯系统中关键器件之一,天线性能的优劣将对整个通讯系统产生直接影响。为了实现更加良好的通讯质量和更大的通讯容量,微带天