分布式数据集成管理工具的研究与实践

来源 :自动化与仪器仪表 | 被引量 : 0次 | 上传用户:ironbra
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大数据时代的到来,企业管理着规模庞大的数据资产,为满足企业日常批量数据集成、数据批量共享交换、数据分析的需求,本研究针对企业日常批量数据集成、数据批量共享交换、数据分析的工作的现状和难点,以及传统集中式数据集成管理工具存在的不足,提出了分布式数据集成管理工具解决方案,通过多节点、多线程的作业模式和智能化作业调度关键技术研究,完成了分布式数据集成管理工具搭建,并进行了试点应用,完成50亿条数据的抽取转换工作从82小时缩短至16小时,12亿条数据的抽取转换工作从19小时的抽取工作缩短至4小时,有效提升了数据集成效率。
其他文献
目的探讨带线锚钉内固定治疗TossyⅢ型肩锁关节脱位的临床疗效。方法回顾2010年5月至2012年10月对17例TossyⅢ型肩锁关节脱位行切开复位带线锚钉内固定结合韧带修复治疗,男10
费城染色体阳性(Ph+)急性淋巴细胞白血病(ALL)为难治性血液系统疾病之一,占成人急性淋巴细胞白血病(aALL)比例较高,成人Ph+ALL对传统化学治疗方案效果不好,近年来,伊马替尼作
随着社会经济的发展和人们生活水平的提高,汽车数量增长迅速,对成品油的需求量不断加大。成品油终端销售量的大幅度增长,使得我国加油站的规模不断扩大,数量不断增加,在为成
在介绍基于压电阻抗的缺陷检测基本原理的基础上,利用压电传感器的压电阻抗测量对一大比例不规则多腔钢管混凝土试件中钢管内壁与核心混凝土之间的模拟界面剥离缺陷进行检测
在科学技术水平不断提高的今天,自动测试系统在各个国家的航天、军事、电子和通信等多个领域都得到了应用,并已取得了显著的发展。而与此同时,随着高新技术的发展,自动测试系
由于锁相环工作频率高,对其进行仿真,数据量大,仿真时间长。为了提高锁相环设计效率,有必要建立一个高效的仿真模型。详细分析了全数字锁相环的构成及各个模块的工作原理,在
许多人一提到早期阅读,认为就是让孩子识字。其实不然,早期阅读应当包括一切与书面语言学习有关的内容。为了拓展幼儿早期阅读的空间,我们应使阅读活动走出教室,走出幼儿园,
目的 :探讨布氏杆菌性脊柱炎的CT、MRI表现及鉴别诊断,从而提高对该病的认识及诊断水平。方法:回顾性分析8例经临床或病理证实的布氏杆菌性脊柱炎患者的CT及MRI表现,并复习文
目的观察在常规内科治疗的基础上使用人工肝血浆置换治疗不同临床分期肝衰竭的临床疗效。方法选择肝衰竭患者37例,其中男性28例,女性9例;年龄25~65岁,平均年龄39.5岁。早期19
<正>元朝以前,乌龟是人们眼里的明星级动物,那时,人们发现乌龟非常长寿,乌龟的寿命可达百岁以上,而且乌龟能忍饥渴,长期不吃不喝都没有关系,生命力极其强盛。于是,人们就成了