基于流数据技术的Internet信息监测系统的研究

来源 :燕山大学 | 被引量 : 0次 | 上传用户:longyonghong520
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络的快速发展,网络数据的使用越来越受到人们的关注.由此,出现了一个新的研究热点——流数据.流数据的出现给传统的数据库管理带来了很多新问题,如何处理大量的实时数据,避免数据的丢失以及如何存储不断增加的新数据等.这些问题都要求新的查询、存储处理方式,也就是该文提出的连续的查询与动态的存储处理.该文对国内外关于流数据的查询与存储技术的研究现状进行了综合分析,从一个全新的应用角度,面向实际问题的解决,对流数据的查询、存储及其优化方式进行了研究与应用,并针对目前研究中的问题,发现了它的不足之处,并提出了解决方案.首先,该文提出了新型的SDMS(Streaming Data Manage Systems)模型,将流数据领域中的查询分成实时数据查询处理与历史数据查询处理,并针对于应用系统,提出了实时数据查询索引方法与历史数据查询索引方法.其次,该文在实际系统中扩充了流数据的研究理论,将关系数据查询与当前正在发展的XML技术结合起来,将XML作为发布系统引入了SDMS中,使得流数据应用的数据源可以适应不同类型的网络数据.此外,该文针对于历史数据的特点,提出了"聚集值分级统计法".根据数据的时间戳早晚,分不同粒度级来压缩数据,保存数据的聚集值,转出详细数据记录,节省了存储空间.最后,该文将原型系统与原有版本的监测系统作了分析与比较,对比了性能上的改善,取得了可喜的成果.
其他文献
当前,国内外学者已经做了大量的工作来研究路由协议以及其相应的性能特点,也有少量关于能量方面的协议,但仍然存在许多未解决的问题.该文在总结前人的基础上,对Ad Hoc网络的
本文中,我们提出了两类前沿的基于无线传感网络的目标跟踪算法。第一种使用了射频传感网络;第二种将蚁群优化算法用于目标跟踪,具体如下.  RF传感网络是可以实现人或其它目标
电子公告版,又名BBS,是Internet上一种面向文本的交互式、综合性信息服务系统.随着Internet在中国的高速发展,电子公告版系统已经成为了非常有影响力的信息传播途径.但是随着
本文讨论了利用BI技术将分析决策所需数据从税务机关日常运行环境中分离出来,使用户能够方便地提取所需的数据,同时又不干扰业务数据库的正常运行。解决方案是在原有数据库基础
随着Internet网络的普及和发展,Web网站逐渐成为政府办公、企业、个人宣传和发展的重要手段.但在网络环境下网站被越来越多地入侵者攻击,甚至造成无法挽回的损失,因此确保Web
计算网格是先进的网络技术特别是高速网络技术和先进的计算结构的产物,是一种硬件和软件的综合体系结构。从硬件观点看:一个计算网格是地理上分布的异构的和动态的各种高性能计
光子图算法是全局光照算法中的一种,它的主要思想是利用光子模拟光能在场景中的传递,从而求得全局光照的解。光子图算法是物空间算法的一种,这也意味着它是独立于视点的。该算法
面对今天浩如烟海的信息,如何帮助人们有效地收集,选择和存储所感兴趣的信息,更关键的是如何帮助用户在日益增多的信息中发现新的概念和它们之间的关系,使之能做到信息处理的
手掌诊病是传统中医诊断方法中的一种重要诊断方法.基于Biometrics的自动手掌诊病是生物特征识别技术在医学诊断方面的一个重要的应用,它的研究是一项开创性的工作.在对手掌
车间作业调度问题属于NP难问题,也被认为是最难的组合优化问题之一.为解决工业生长、经济管理和网络通讯等诸多方面的问题,都要借助于求解这个问题.优质、快速地求解作业加工