复杂数据流分析关键技术研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:tyybj2008
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近些年,在传感器网络、互联网监控、金融交易等领域,出现了数据流分析的应用需求。然而,传统的数据处理方式不能很好地解决这种数据流分析应用,针对这些应用的数据流分析技术在学术上和工业上都受到了高度关注。随着复杂数据流分析的需求增加,研究复杂数据流分析的关键技术也越来越重要。在进行复杂数据流分析时,现有的解决方法通常是设计特定的复杂概要数据分析算法来解决。但对于越来越多的各种复杂数据流分析应用,每次都开发相应的分析算法来解决的方式显然不能很好地满足需求,一种更好的方式是重复利用一些比较通用的分析算法,通过与其他算法的组合来完成复杂数据流分析。然而,在组合分析时一个分析算子的输出数据如何很好地传给后续分析算子的问题需要得到解决,也就是两个算子之间的数据交换问题。结合数据流分析要求的高效的时间空间性能,设计了较为高效和通用的数据交换方式。数据交换采用了基于模式匹配的星状交换方式,该方式中需要解决中间数据模型,数据模式的描述,模式匹配过程和模式转换描述几个关键问题。结合数据流分析中关系数据和复杂数据的不同特点,设计了中间数据的元数据模型;同时设计了基于XML标签对该数据模型中的数据模式进行描述;给出了模式匹配的两个要点:结构匹配与类型匹配,同时为了最佳匹配考虑了名称匹配的问题;最后利用可根据数据模式预分配实际数据的特点,设计了简单高效的模式转换描述。介绍了研究中实现的数据流实时分析平台系统,同时介绍了其中数据交换的测试分析。对于复杂数据流分析中数据交换的设计能够比较高效和通用地解决组合数据流分析中的数据交换问题。
其他文献
随着数字图像处理技术的发展,图像拼接技术(接图实现技术)成为其中一个热门话题。图像拼接技术涉及计算机视觉、计算机图形学、计算几何等诸多学科,在多方面,多领域得到了广
频谱监测是对无线电进行管理的一个重要手段,同时服务于政府、军队等重要国家安全部门。本文基于这样的应用背景与需求,对宽带频谱监测技术进行了研究,并对频谱监测系统进行设计
未来的无线通信网络系统不仅需要提供更高速率的数据传输,还必须为多种业务提供QoS保障。相对于基于香农容量的理论,数据链路层的有效容量理论能更好的表征系统保障多业务QoS的
本文介绍了TIG焊快速制造系统的组成及工作原理,从焊接过程焊缝尺寸信息检测的传感方式的对比中得出适用于TIG焊快速制造金属结构的传感器为视觉传感器。 在TIG焊快速制造
UMTS网络的演进主要体现在两个方面:首先在接入网使用包括WCDMA,CDMA2000和HSDPA WCDMA等高速空中接口技术。其次,UMTS的核心网将采用全IP的分组软交换技术。进而将移动核心
随着3G时代脚步的日益临近,越来越多的运营商已经构建或即将开始构建3G网络。但是,由于用户需求不旺,3G移动运营商陷入了困境。目前,绝大多数的3G移动运营商都同时拥有3G和GPRS网
无线通信技术的发展要求未来的移动通信系统能够以最低的代价(带宽、功率、复杂性)来为各种用户提供高质量的宽带业务。无线信道中高速数据的多径传输往往会引起信道的频率选
人脸识别是根据人体面部图像进行身份识别的一项技术,是生物特征识别领域重要组成部分,具有重要的研究价值和广泛的应用前景。近年来,涌现出许多高性能人脸识别算法,人脸识别技术
随着集成芯片技术和音视频编解码技术的快速发展,视频监控系统集成的功能越来越多。录影作为视频监控的基本功能,由低清到高清,由单路到多路,由无声到有声,录影功能越来越齐全。另
IPTV(Internet Protocol TV网络电视,或Interactive personal TV交互电视)是一种将视频、宽带数据、VOIP、网络服务等领域有效地结合在一起,向家庭用户提供包括数字电视在内