基于可变时间窗口的增量数据抽取模型

来源 :计算机科学 | 被引量 : 0次 | 上传用户:maqianjin123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于合适的数据抽取模型持续不断地将变化的数据从各个数据源系统进行抽取集成,是各个异构系统之间进行数据共享融合的关键,也是构建增量式数据仓库来进行数据分析的关键。传统的时间戳变化数据捕获方式存在因数据抽取过程中发生异常而导致数据抽取失效,进而影响数据抽取效率的问题。鉴于此,文中借鉴时间窗口的思想,采用先抽取少量重复记录再去重的做法,对传统的时间戳增量数据捕获模型进行了改进,提出了基于可变时间窗口的增量数据抽取模型。该模型减少了异常对数据抽取的影响,增强了时间戳增量数据抽取ETL流程的可靠性,在一定程度上提高
其他文献
长达千年的中世纪,是西方社会基督教思想、教会与世俗(封建)权力的建立、发展(纷争)时期,亦是基督教文明的渐构过程,而非纯然以往所说的黑暗时代.此种情境中的艺术行为绝然源
我国卫生事业与经济发展水平具有密不可分的关系,卫生事业是我国经济发展的一个重要折射点。本文首先从政府、社会以及个人支出三方面研究了我国卫生支出结构与经济发展水平
建设工程质量简称工程质量。工程质量是指工程满足业主需要的,符合国家法律、法规、技术规范标准、设计文件及合同规定的特性综合。建设工程作为一种特殊产品,除具有一般产品共
氧化石墨烯是石墨烯的衍生物,也是近年来最具有发展前景的纳米材料之一。因其具有较大的比表面积和丰富的含氧基团,氧化石墨烯吸附有机物的机理根据有机污染物性质的不同而不
具象与抽象是绘画的两种表现形式,具象中有抽象的存在,依托抽象提升再现具象的艺术性;抽象中有具象的基础,在再现具象的能力基础上升华出抽象意味。具象特征最强烈的写实绘画作品
目前,交通银行在全行推行统一号码的电话银行,每个城市分行都向当地邮局申请95559特别号码,方便交行客户享受到快捷便利的电话银行服务.
艺术个性自浪漫主义运动开始得到张扬,其后便是一个不断展开的过程,在现代主义美术中也是如此,并且还将随着人性的不断丰富,与其相互启发、补充、展开.与人性同在,与艺术同在,成为绘
电话银行是利用电话为客户提供随时随地的24小时人工服务的金融服务渠道,它不与客户直接面对,通过信息系统识别客户后由客户自主或通过客服代表完成后续相关交易,操作流程存在一
系统研究了机场助航灯光电缆主要的国外标准,对该产品结构、技术性能、试验规范等内容进行了分析比较,并提出了制订我国民航行业标准的建议。
中世纪晚期,随着英国民族国家的逐渐形成,英国社会宗教意识发生演变,反教权思想渐渐产生。其原因有:英国的教会传统有别于西欧大陆,王权相对强大;天主教会腐败混乱、威信扫地;中世纪