数据流的变化检测算法及其在实时汇率数据流异常检测中的应用

来源 :郑州大学 | 被引量 : 0次 | 上传用户:Jackyx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在各商业银行提供的实时外汇买卖业务系统中所采用的汇率是以一种实时在线到达的、易失的、无限的方式获得的数据流。由于各种原因,在这个数据流中经常会出现一些异常片段。它们会给银行或客户带来很大的经济损失。如何检测存在于实时汇率数据流中的异常片段是目前困扰外汇买卖系统开发的一个主要问题。通过对实时汇率数据流的深入观察和分析,可以发现,其中异常片段的最大特点就是拥有与正常的汇率数据流不同的数据点分布情况。因此,可以通过检测数据流中数据点的分布变化来发现这些异常。本文试图在这个方面做出一些尝试,提出一种能够检测数据流中的数据点的分布变化的算法,以实现对实时汇率数据流的异常片段的检测。 虽然近几年国内外在数据流处理技术方面有了较大的进展,但是,其大多集中于研究在存储有限的情况下,对数据流数据近似地求解数据查询、挖掘与分析的任务,对数据流分布变化的检测问题涉及较少。然而在实际的生活中,我们经常可以看到人工识别数据流变化的例子。虽然人工的方法并不能处理大量的数据,但是我们可以通过模拟人工识别差异的过程,并将其程序化,尝试用其解决我们的问题。所以,本文将目光投向模拟人工识别过程,对其背后隐含的理论基础进行了深入的讨论,并以此为基础提出了本文描述的算法。 本文首先通过观察两个人工发现数据流变化的过程,对其隐含的理论背景进行了深入的讨论,并在此基础之上提出了基于两个静态样本的变化检测算法及其优化。然后,为了将该算法应用到数据流环境中,提出了基于两个滑动窗口的数据流变化检测算法。在实验部分,模拟一个不断变化的数据流作为算法的应用对象,实验结果证明了算法的准确性和有效性,并对如何选择算法的相关参数,以适应实际的应用环境,进行了一些讨论。 最后,本文根据实时汇率数据流的特点,建立了数据点相互无关的实时汇率数据流的检测模型,然后采用本文提出的数据流的变化检测算法解决实时汇率数据流的异常检测问题,并给出了实验结果。
其他文献
20世纪90年代以来,随着计算机信息技术、信息处理技术及网络技术的迅猛发展及其应用的不断普及,关系每一位公民健康和切身利益的医疗信息系统(HIS)的发展脚步也越来越快。建立科
本文的工程背景是南京理工大学计算机系模式识别与人工智能实验室的N—1型道路状况智能检测车项目,目的是对系统的体系结构进行改进,对路面病害自动检测算法进行研究。 高速
网络科研项目的实施往往需要一些特殊的、性能多样的网络场景作为测试环境。目前进行网络实验的方法主要有三种:搭建真实的网络环境、基于模拟的方法和基于仿真的方法。其中,搭
随着互联网技术的飞速发展,以中国教育科研网CERNET为骨干的全国高校校园网的建设取得了长足的发展,并直接促进了基于校园网的各种应用系统的整合。作为应用系统整合的第一步
  随着计算机网络技术的飞速发展,网络和我们的生活变得息息相关,但是网络是一把双刃剑,在带给我们方便快捷的同时,网络安全也已经成为一个至关重要的问题摆在我们面前。  作
  本文首先介绍了软件测试的一些基本理论知识,并对面向对象软件测试进行了一定的介绍。然后介绍了软件系统回归测试理论。接着结合本人对回归测试的研究,对现有的几种回归测
近几年,嵌入式产品市场迅速崛起。随着网络技术的迅猛发展,WAP浏览器成为了很多嵌入式系统必不可少的一部分。许多公司都投入到了WAP浏览器的研究和开发中。 WAP浏览器是
随着COM、DCOM、COM+乃至ActiveX技术的应用和发展,软件系统的架构和程序设计的理念也发生了很大的变化。借助于组件和面向对象等模型,这些技术对近年来逐渐流行起来的客户/
随着信息技术、网络技术的快速发展,WEB 应用系统的开发,特别是企业级WEB 应用系统的开发已经成为软件开发的一个重要领域。企业级WEB 系统的开发通常要求有一个良好的软件体
本文介绍了一个基于数据库的具有语义访问功能的逻辑文件系统的设计,并以办公文档为例,具体介绍了如何以Oracle9 iFS为平台实现这个逻辑文件系统。 首先给出了课题背景和