ETL在ISBN中心业务系统中的研究与应用

来源 :北方工业大学 | 被引量 : 6次 | 上传用户:sk_chin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文介绍了ETL原理、国内外数据转换技术以及ETLI具发展等内容。在详细分析了数据转换理论和现有的数据转换技术后,指出了现有工具的不足之处。本文结合ISBN中心业务系统的实际需求,提出了以XML技术为基础的ETLI具解决方案,在一定程度上解决了传统ETLI具对数据库服务器造成的负载问题,均衡了各服务器的利用率。 本文根据实际项目的具体需求,采用XML为主要技术手段,建立了如下的模型:异构数据库元数据的获取模型、数据转换和清洗任务流定义模型、数据上载任务调度模型等。作者研究了数据转换过程中需要解决的技术问题,并以前述模型为基础,开发了对应ETL四个阶段的数据转换工具,通过该工具能处理JDBC所支持的数据库、EXCEL文件,以及基于多种异构数据库提取的数据之间的清洗与转换。使用者可以自己设计转换流程、定义转换规则、定时调度转换任务,该软件具有较好的通用性和灵活性。作者用此工具进行过多种数据转换的测试,效果较好。 作者在研究、开发与应用的实践中,总结出了进一步改进和完善该软件的方法,这是作者下一步要做的工作。
其他文献
本文通过对基于神经网络的降质图像恢复过程的研究,从运算量、存储空间和恢复效果等方面改进算法,使时间复杂度和空间复杂度有很大的降低,同时提高图像恢复效果。通过改进Hopfie
本文通过对RAM、硬盘、磁盘阵列、磁带、带库、各种光介质、全息存储等各种存储介质的速度、容量、稳定性、价格等因素的分析比较,阐明了合理选择、使用存储介质的重要性;通过
管理是企业的灵魂,如何利用信息技术手段加强和改善企业管理,强化监督,提高企业资源、人力、资金使用率,扩大监控机制,把先进的管理理念及管理模式带入企业的每一角落,已成为
为了提高系部教学质量和学习效果、丰富教学手段、增强教务管理水平,我们结合学院工作和应用的实际,全面分析了WEB两层和三层体系结构,设计并实现了基于J2EE四层结构的动态网站
随着通信技术的不断发展,特别是网络技术的不断成熟与完善,利用网络技术实现对通信设备的服务渐渐成为一种可能。当前我国综合国力不断增强,居民在汽车电子领域的消费不断增加,提
近年来,随着计算机性能的不断提高和网络技术的快速发展,集群因为其自身低成本、高性能的优势已成为近年来计算机技术方面的研究热点。而对集群系统的性能进行进程测评时,需
随着互联网的快速发展,数据呈现指数级增长,有限的网络带宽和匮乏的存储资源成为数据处理的瓶颈。数据压缩是在不丢失有效信息的前提下,缩减数据量以减少存储空间、提高数据
本文对并行VHDL模拟中故障诊断技术的实现进行了研究。文章介绍了并行VHDL模拟的基本原理并详细描述了时间偏差协议。针对并行VHDL模拟系统的特点,我们提出了一个故障分类方案
图的染色是一个应用非常广泛的学科,确定图的色数又是图论中一个重要内容。本文提出了一种新的图运算——等度,由此运算生成的图称为等度连图。文中分别讨论了其正常边染色、邻
在空管系统的各个子系统中,雷达显示终端(Radar Display Terminal)席位作为与管制员或者系统操作员直接进行交互操作的界面,是整个系统的重要组成部分之一,几乎每一个雷达数