数据流联机分析处理技术的研究

来源 :黑龙江大学 | 被引量 : 0次 | 上传用户:fengyun163
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近些年,数据流逐渐成为越来越重要的数据类型。数据流终的数据不同于传统的数据库中的数据,因此数据流中的数据处理和管理方面的技术需要重新被考虑;这开拓了一个崭新的研究方向。另外,随着多年的OLAP技术的研究和发展,OLAP已经起到越发重要的作用。现有的OLAP技术只是基于有限的、静态的、持久稳固的、历史的数据;而数据流联机分析处理是基于无限的、连续的、快速变化的流数据。那么数据流联机分析处理技术的研究将是一项具有挑战性的任务。 本文主要研究了数据流联机分析处理技术。首先,本文研究了数据流的滑动窗口大小控制方法和窗口更新技术。它们很好地适应了数据流的多样流速情况。本文提出了一种基于静态滑动窗口的数据流聚集技术。它能够有效地实现细节性数据流上的近似查询。第二,本文研究了时间序列数据流的回归分析技术。该项研究包括以下几方面:(1)时间序列数据流的一元线性回归模型的创建技术和回归模型的应用;(2)多个线性回归方程的聚集技术。本文的实验分析展示该技术能够有效地产生时间序列数据流的回归模型,快速地完成数据流的回归分析。第三,本文提出了多粒度时间维的设计思想,定义了两个关键子模型,并阐述了基于先验路径的钻取技术。基于上述三项研究,本文研究了一种数据流上部分物化多维数据模型的设计与实现。性能分析表明该设计能够有效地利用了有限的存储资源。最后,基于以上算法,本文提出了一个数据流联机分析处理原型系统的总体设计,并给出了实验结果。
其他文献
Web服务器集群系统已经成为当今Web站点普遍采用的服务器体系结构,伴随着大量重要业务向Web服务方式的迁移,提高和保证Web集群服务的安全性变得至关重要。 本文深入研究了We
伴随着计算机技术和信息全球化的高速发展,我们迎来了大数据时代,人们面临着从数据中获取有用信息以支持更好的决策和发展。面对着源源不断产生的大量的流数据,如何从流数据中获
该文分析了彩色喷墨绘图机的工作原理以及组成结构,并在此基础上详细的论述了绘图机喷绘控制器中喷头小车驱动以及走纸步进电机的驱动电路设计.其中重点讲述了喷头小车的直流
随着因特网的发展和对流媒体及视频等增值业务的需求,IP组播技术应运而生。IP组播是面向组接收者的有效数据通信方式,利用一种协议将IP数据包从一个源传送到多个目的地,将信
随着网络技术的发展,为了保证网络能够有效、可靠、安全、经济地提供服务,网络管理越来越重要。 传统的网络管理采用的是集中式管理,由管理者利用轮询机制,对被管理者发布管理
本文的研究目标是为了在ERP系统的库存管理模块中解决并实现批量出库问题。针对现存ERP系统中的库存处理方式与实际的生产应用进行比较,对实际生产中的批量出库着重进行了研究
随着国际互联网的发展和大规模存储的普遍应用,数据挖掘作为对数据进行分析理解应用的科学,越来越受到重视.数据分类是数据挖掘的一个重要研究领域.近年来数据分类的理论研究
椭圆曲线密码是公钥密码的研究热点。本文主要介绍了椭圆曲线公钥密码的相关内容,在这一基础之上重点研究了椭圆曲线公钥密码快速实现的方法。本文首先给出椭圆曲线密码体制的
移动计算环境下,由于有通信带宽窄、网络断接频繁、移动终端资源有限等缺陷,造成了移动数据存取的瓶颈.它使该环境下查询处理面临一定的挑战,减少移动节点对数据库的访问正是
当代产品创新设计的本质是知识的创新,而在现实世界中,知识和信息是极其丰富的,对于创新设计者来说,真正稀缺的是有意义地使用现有知识的能力,即应用知识实施技术创新的能力。知识