凹印复合生产数据的ETL技术研究与应用平台开发

来源 :西安理工大学 | 被引量 : 0次 | 上传用户:gswwg
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当今,随着凹印复合生产流程信息化的快速发展,印前的决策作用越来越突出。并且在凹印复合流程中积累了大量内容丰富的数据,这些数据如果用得好的话,将会成为决策的重要因素。对于这些数据处理的最好办法就是进行数据挖掘和多维分析,数据挖掘和多维分析的支撑是数据仓库。而数据仓库需要干净、有效的数据,所以数据在装载到数据集市之前必须进预处理也就是ETL(Extract-Transformation-Loading)过程。虽然当今市场有现有的ETL工具,而且性能良好,但是在普及时因其造价和通用性上却碰到了不少困难。因此,自主研发适合自己业务的ETL工具便成为了企业关注的重点。  本文首先研究了数据仓库和ETL的相关技术,对ETL的原理进行了深入的研究,重点阐述了本ETL系统中数据抽取、数据转换和数据加载三大模块中的方法实现和流程设计。对元数据也进行了一定程度上的研究。结合实际需求开发了一个基于元数据的可配置的ETL系统。该系统分为四大模块:元数据管理模块、数据抽取模块、数据转换模块、数据加载模块。抽取、转换、加载的步骤是分开实现。抽取和转换都有自己独立的中间数据库,日志管理更是很好的解决了模块之间的数据沟通。系统有人性化的操作界面。系统架构层次分明,有利于扩展。  本文的重点不仅仅是在于开发了一套功能软件,而是设计和研发出了一个ETL工具的雏形,从原理、技术以及设计与实现上做了一些探索性的工作。可以说本ETL系统既可以作为一个ETL工具使用,满足一定的需求,也可以作为一个成长中的应用开发平台,供二次开发使用。
其他文献
无线通信技术的高速发展给当今通讯带来了便利,但是在收发过程中存在着多径衰落,使信号在接收过程中形成码间串扰,造成波形失真,大大降低了通信质量。而均衡技术恰是解决码间串扰
随着验钞机行业新国标的颁布,传统验钞机的设计方案面临着许多问题。新国标要求验钞机具有很强的鉴别能力,因此对验钞机的软硬件要求大幅提高。基于新国标的要求,本文探讨了一种
人机交互在现代社会越来越受关注,让计算机识别人类情感状态是实现智能互动的基础。语音是人类交往过程中信息交流、传递情感最自然有效的手段。语音情感识别研究不仅积极推进
协作分集技术是未来无线通信中对抗信道衰落的有效手段之一,该技术可以使分布在不同地理位置的网络节点共享彼此的天线,从而构成虚拟的多天线阵列来获得空间分集增益。然而,协作
本文的主要研究目的是利用双目立体视觉以及拼接测量的知识获取大型可展开天线关键点的三维坐标。该天线采用轻质柔性材料制作,因此在实际测量中,当外部环境变化时该天线容易发
摘要:模式选择算法是视频编码的一项关键技术,H.264/AVC、AVS等视频编码标准都采用了基于率失真优化的模式选择,与以往的视频编码标准相比,它们的编码效率有了很大的提高。但
无线光通信因其具有无需频率许可、低成本、安装方便、通信安全保密等优点,近年来一直是人们持续研究的热点。而以分集技术,智能天线为标志的MIMO技术则令射频无线通信发展日益
随着集成电路制造工艺的进步和处理器设计水平的不断提高,众核技术已成为当前处理器体系结构发展的必然趋势。处理器的复杂度呈指数幅度上升,使故障的查找和修复变得越来越困难
普通摄像器材由于本身视场角的限制,不能一次性地拍出超宽视场图像,鱼眼镜头可以克服这个缺点,但是鱼眼图像具有严重的桶形畸变,在利用鱼眼图像信息之前,需要对鱼眼图像进行校正展
基于阵列波导光栅的光纤光栅解调方法是一种极具潜力的新型光纤光栅解调方法,具有精度高、解调速度快等优点。通过将解调系统的组成部分诸如光源、耦合器、阵列波导光栅、光电