面向流式数据带时间约束的频繁片段挖掘算法

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:dinghailing
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着电子数据采集设备的普及,每天都有大量的信号序列数据通过网络传输的方式,源源不断的输送到数据终端。这些采集到的序列数据里,相邻事件之间可能存在某些必然的联系,揭示设备中事件的发生规律。近年来,计算设备数据处理能力的提升,使得人们从海量序列数据中,挖掘出频繁出现的序列情节片段成为可能。如何对序列信号数据进行高效的频繁情节挖掘,发现序列信号中潜在的规律信息,引起学术界的持续关注。与序列模式挖掘不同,情节挖掘面向的数据是一长串的序列事件数据流,贸然对其进行分割处理可能导致某些情节被截断,因此如何在整条数据中挖掘有意义的情节发生,一直是学界面临的一项挑战。近年来,学者们根据挖掘侧重点的不同,提出了多种情节发生的定义方式,但这些方式在统计情节发生数量时,或存在重复计数问题,或因情节无交叠性,对交叉发生的事件直接丢弃。本文在现有工作基础上,考虑关联事件间的发生时间跨度和情节相互交叉发生的情况,提出互异的带时间约束的可交叉最小发生的情节定义方法。该方法有效弥补现有情节发生定义工作的不足,且针对这一情节定义,利用ONCE算法的Occ Map结构并加以修改,提出ONCE-TDM情节计数算法,通过一次扫描,实现精确捕获和计数特定情节发生的工作。在完成情节定义和精确计数工作的基础上,我们针对动态的流式数据进行实时频繁情节挖掘。通过使用滑动窗口,定位当前时刻下值得关注的序列数据,对窗口中数据进行情节挖掘分析。采用前缀树这一树形结构,对挖掘到的情节信息进行压缩存储,同时便于对频繁情节进行快速查找。方案通过设计前缀树中节点的存储数据,使得算法能在旧窗口挖掘结果的基础上,根据过期数据和新到达数据的事件类型,仅修改部分情节数据和对窗口中少部分序列数据进行扫描和情节计数,即可完成面向新窗口数据的频繁情节挖掘工作。综上所述,本文在数据实时到达的背景下,结合文章提出的支持度定义方式,提出一套完整的面向动态流式数据的带时间约束的频繁情节挖掘算法。最后,本文在真实数据和人工生成数据环境下,通过改变窗口大小、时间间隔约束、情节支持度参数,分别对算法挖掘到的情节数目、时间消耗情况进行实验测试,通过与静态批处理环境下情节挖掘结果进行对比,证明了算法的可行性和高效性。
其他文献
原发性肝癌(primary liver cancer,PLC)在中国是常见恶性肿瘤疾病,肝细胞肝癌(hepatocellular carcinoma,HCC,以下简称肝癌)约占原发性肝癌总病例数的80%,是最主要的病理类型。肝癌侵袭性强,易于早期转移,目前临床上首选的治疗措施为手术治疗。然而由于肝癌早期症状不明显,多数患者就诊时已多发展至中晚期而丧失手术机会。尽管以化疗、放疗为代表的综合治疗在一定
学位
微观尺度的摩擦力是非平衡态统计物理的一个典型问题,由于非平衡态统计理论尚未形成足够普适的范式,相关理论工具不够成熟,因此微观尺度的摩擦力研究至今是一个开放性的问题,微观体系摩擦过程中的能量耗散机制尚未有一个普适的理论来描述和解释,所以研究微观尺度的摩擦具有重要的理论意义。本文基于微扰量子场论讨论了几种介观体系中的量子层面的耗散和摩擦力,本文的研究内容分为四个部分,以所研究的体系分别命名为:a.“金
学位
报纸
在信息化时代,电子病历有着传统纸质病历无可比拟的优势,从而被广泛应用。在我国,已有超过96%的医院开展了医院信息系统建设工作。电子病历记录着患者就诊过程的全部数据,对于医疗机构和第三方而言,均有较高的应用价值,但对患者而言,具有高度的生理和心理敏感性。医疗机构作为电子病历数据的采集方、保存方和应用方,任何的技术欠佳和管理不当都可能产生规模性的隐私侵犯案件。一旦患者的电子病历隐私遭受侵犯,导致患者的
学位
报纸
随着航空航天,交通运输和国防、军事工业的发展,业界对铝合金的强度、塑性和尺寸稳定性提出了更高的要求。传统铝合金存在强度低、尺寸稳定性差、不耐高温等缺陷,因此急需开发强度高、塑性好、尺寸稳定性高的新型铝合金材料。纳米金刚石(nanodiamond,ND)既具有金刚石高硬度、高强度和低热膨胀系数的优势,同时又具有纳米材料尺寸小,比表面积大,表面能高和表面易修饰等优良特性,是一种颇具应用前景的铝基复合材
学位
毫米波频段通信是5G技术的重要组成部分之一,提供更快的上下行速度,更宽的带宽,更低的延迟以及更少的干扰,是未来无线通信的重点发展方向。相控阵天线因波束的灵活跳变被广泛应用于卫星通信、蜂窝移动通信、目标跟踪系统等方面,宽角扫描毫米波相控阵天线是5G、6G通信系统的研究热点。然而目前的相控阵天线大多只能在±45°范围内扫描,并且时常伴随着4-5d B的增益波动,本文针对相控阵天线的波束扫描能力以及增益
学位
目前学界为数不多的将经典叙事学运用于翻译批评的研究,多聚焦于叙事视角、话语呈现方式、讲述与展示、叙事时间、不可靠叙述、叙事距离6个元素,而且留有很多深入研究的空间。这在理论和实践上都难以满足译本全面的叙事翻译批评需求。本文又提出叙事空间、隐含作者、元叙事、易读性与可读性、叙事结构、叙事功能6个元素。通过运用跨学科移植法和“规定+描写辩证批评法”,我们建立一个包括上述12个元素以及相应详细考察要点的
期刊
报纸
5G通信产业本身对于频率源的准确度和稳定度的要求很高,使用中国北斗卫星导航系统(Bei Dou Navigation Satellite System,BDS)信号驯服恒温晶体振荡器(Oven Controlled Crystal Oscillator,OCXO)改善恒温晶振输出频率的老化漂移和稳定漂移的技术是解决部署问题的关键。如何提升恒温晶振在失去锁定后的保持能力成为至关重要的问题。本文研究提
学位