面向时空数据流的分布式索引

来源 :浙江工业大学 | 被引量 : 0次 | 上传用户:zyhope006
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着物联网技术和基于位置的服务(LBS)的快速发展,位置感知服务在日常生活中发挥着越来越重要的作用。基于物联网技术和LBS采集到的数据通常带有时间域和空间域特性,称之为时空数据。连续到达的时空数据称为时空数据流,它具有实时性、无限性、突发性等特点。对于流式时空数据需要新的查询处理技术来处理,传统空间索引的批量装载方法,如R树,不适用于时空数据流场景,他们通常只考虑静态数据或批量更新。然而,对于时空流数据,现有的批量构造方法不能实时或近实时处理。本文基于分布式索引技术和R树批量装载技术,提出了一种面向时空数据流的分布式索引。该索引采用时间窗口机制将时空数据流切分为连续的时间窗口处理单元,然后使用针对时空数据流优化的R树批量装载算法为每个时间窗口构建一棵内层R树,将每个时间窗口的时间信息和对应的R树根节点信息组成<key,value>元组,用于构建外层B+树。通过外层B+树、内层R树组成的两层分布式索引结构,实现了海量时空数据的高效存储,并可对外提供低时延、高并发的索引服务。本文的主要贡献如下:1)基于对时间窗口内数据双重排序的思想,提出了一种称为DSortLoad的新型批量装载算法。DSortLoad将批量装载技术与数据流特征结合起来,通过先构建R树骨架,随后将键分配给树的方式来构造索引。2)提出了一种名为SSortLoad的批量装载算法。SSortLoad首先收集一定数量的采样数据,然后使用经过排序的采样数据来推导时空数据分区方案,而不采用DSortLoad和STR的先对全量数据排序再分组的耗时操作。SSortLoad的构造速度比DSortLoad快得多,具有低时延和大吞吐量的特性。SSortLoad可以快速对外提供查询服务。3)提出了一种面向时空数据流的两层分布式索引系统。该索引的上层采用B+树索引时间域,下层采用R树索引空间域,并结合一致性哈希算法,将索引构建、数据存储、数据缓存进行了有效的分离,在实现海量时空数据高效存储的同时,对外提供了高并发的查询服务。
其他文献
从城市可持续发展的角度,论述了地面沉降这一灾害性地质现象,揭示了地面沉降对城市可持续发展的各种破坏效应,如影响城市人居环境状况,影响建筑物安全,导致疏排水不畅,沿海城
本文介绍了一种以8位单片机为控制核心的智能型家庭安防系统。它通过各种传感器对危害家庭的对象进行监测;如有告警信息,控制器启动现场声光报警系统报警,同时通过GSM模块将
<正>本刊讯目前正是景天科、番杏科等冬型种多肉植物的生长旺季。在郑州某大棚内,生石花、口笛、群碧玉、少将以及黑法师、球松、火祭、雀扇、特玉莲、吉娃莲、爱染锦等不同
从去年11月开始,“微童话”忽然成了一个热门词语,这种采用140个字讲述童话故事的写作形式,一下子成为一块五彩缤纷的试验田,儿童文学作家纷纷推出微童话作品。今年1月,新浪微博推
报纸
小儿股骨远端骨骺损伤临床少见,占全身骨骺损伤2%,特别轻微的损伤易漏诊,骨骺移位明显可出现神经、血管损伤,骺板的骨折可能致后期畸形,影响儿童生长.我院从1990年5月至1998
矿业权评估工作中经常涉及矿产资源禀赋优劣评判问题。矿产资源禀赋优劣指标权重是影响矿产资源评估结果大小的量度;权重值确定是否合理能在一定程度上反映矿产资源禀赋等级
温湿度是各种工作环境中最重要的物理量之一.该设计采用多路温湿度监测系统对被测场所的温湿度信号进行精确测量.该系统以单片机为核心,配合温度和湿度传感器,以及相关的电路
为全面显示偶像走势及音乐人的成绩,《大舞台》每期会由读者投票选出自己心目中最喜欢的十首歌曲,希望支持乐坛的 Fans 把握住这个投票机会。别忘了,还有礼品送给幸运的你哟!
期刊
介绍了改性沥青在国内外的发展历程,阐述了改性沥青的研究现状,从发展新型的改性剂、提高沥青混合料的整体水平等方面,研究了改性沥青的应用前景,使其在国内外广泛推广应用.
研究了菊黄东方鲀仔鱼对硫酸铜、高锰酸钾、敌百虫3种水产常用药物的耐受性。结果表明:硫酸铜的安全浓度为O.76mg/L,高锰酸钾安全浓度为0.46mg/L,敌百虫的安全浓度为0.56mg/L。菊黄东