基于概要的数据流管理系统的研究与实现

被引量 : 0次 | 上传用户:awander
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深海平台监测系统还有Internet上的流量监控等许多实际应用领域都需要对流数据进行处理和分析。流数据以流的形式到达,是连续、无界和随时间变化的。传统的数据库处理技术不支持流数据的查询与管理,通用的数据流管理系统能够处理随时间变化的连续数据、生成概要数据和支持连续查询,但是,它们仅仅完成了原型系统,还没有形成统一的标准,不能应用到实际的商业系统中。本课题基于深海平台监测系统,研究传感器网络环境下的流数据处理技术,包括概要数据生成技术和流数据的管理与分析技术。论文重点研究概要数据的生成算法,特别对抽样方法做了详细的归纳,并给出了一种基于时间滑动窗口的自适应加权随机抽样算法:AWRS/BTSW算法。该算法根据流数据变化的快慢程度,动态的对流数据加权,将权值和数据到达时间作为数据项的键值,根据键值大小对流数据进行抽样,解决了现有的抽样算法生成的概要数据与原始数据偏离大小不确定以及数据过期问题。与其他抽样算法相比,该算法在数据变化稳定的情况下,能快速地生成概要数据,当监测到数据变化剧烈时,动态改变抽样方式,抽取的概要数据精确性比较高。论文分析与总结了国内外数据流管理系统的研究现状,根据深海平台监测系统对数据处理的要求,设计与实现了基于概要的数据流管理系统BSDsms,并将AWRS/BTSW算法应用到该数据流管理系统中。扩展了现有的流式查询语言CQL,形成了ECQL查询语言,使得该查询语言不仅能支持流数据的连续查询,而且支持对历史数据的查询。实现的BSDsms数据流管理系统可以为深海平台监测系统提供基本的数据服务。本研究成果既解决了深海平台监测应用中的流数据处理问题,又可以应用于任何传感器网络中的流数据管理,为流数据挖掘和分析提供基本的数据服务平台。
其他文献
<正>一、新媒体艺术简述新媒体艺术是使用各种现代屏性媒介手段的艺术表现,主要指电路传输和结合计算机的创作。它起源于达达主义、未来主义时期的艺术,20世纪60年代使用模拟
当今社会,自信心和良好心理素质是适应发展需要的必备条件,自信心是人坚信自己有能力克服困难,取得成功的意志品质。幼儿随着年龄的增长,个性品质正处在可塑性较强的时期,做
经济的飞速发展,把我们带入了体验经济时代,体验经济这种经营方式能给经营者带来很大利润提升,体验经济有三种类型,健身俱乐部经济属于体验经济中的逃避式经济。从健身俱乐部
大型平移式喷灌机虚拟试验研究是“十一五”国家科技支撑计划课题——农业装备虚拟试验技术研究(2006BAD11A1706)的研究内容之一。传统的大型喷灌机试验,不仅需要符合试验要
介绍了PLC的工作原理,电动机控制系统采用ARM芯片作为系统主控芯片,搭配具有强大控制能力的PLC,实现了同时对多个电动机的控制,提供多种模式的选择,并且可以实时显示电动机状
随着人口的老龄化和残疾人的增加,越来越多的人群需要用一种新的交流方式来代替传统的感觉反应通道,脑机接口技术应运而生,并成为国际上热门的研究课题。脑机接口即不依赖于
声呐发射机是主动声呐设备中的重要组成部分,不同的系统对发射机有不同的要求。论文主要设计、实现大功率声呐发射机和宽带声呐发射机及其匹配电路。大功率高频水声发射机由
随着无线通信技术和数字视频压缩技术的不断发展,无线网络中的数字视频传输被广泛应用在各个领域。在工业中,可以用在工厂的无人监控,远程数据的采集;在医疗卫生领域,可以提供
<正>戏曲艺术作为我国重要的非物质文化遗产,是中华民族的瑰宝,其独特而鲜明的中华文化特质、文化风采和神韵,是前辈大师、艺术家们留给后人无法替代的宝贵财富。但是,从当前