基于ETL在电信经营分析系统中的数据质量研究

被引量 : 1次 | 上传用户:wdswdts
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着数据仓库技术的快速发展,数据仓库作为支持决策制定过程的重要手段已经被越来越多的行业和部门所接受,然而,其中的数据质量问题也越来越受到重视。在电信行业的经营分析系统中,如何保障在进入经营分析系统数据仓库之前数据的质量、排除潜在的数据问题,为后来的正确决策打下良好基础,也就成了建设经营分析系统数据仓库之前要考虑的核心问题,也是本文论述的宗旨。本文根据作者在云南移动经营分析系统中的实习工作经历,研究了电信行业与其他行业数据特点的不同,设计了基于经营分析系统数据仓库的统一工作流的ETL流程框架,并在此流程上进行数据质量的稽查和控制。首先,本文通过与一般行业对比,设计了一套适合电信行业经营分析系统的ETL框架,并将整个ETL流程分别部署到不同的服务器平台上,将复杂的流程明细化,使每一个ETL的中间流程都清晰明朗。此外,本文还将详细介绍在整个ETL工作流中贯穿整个ETL始末所采取的数据质量控制方法和步骤,如何实现问题出现到问题定位再到问题解决的闭环。最后,本文将介绍这种统一工作流的ETL流程在某电信运营商的经营分析系统项目中的实际应用。通过对以上ETL流程应用的扩展和延伸,设计出一套应用于一般电信业经营分析系统数据仓库的基于ETL统一工作流的数据质量稽查模块,该模块可以将数据出现的问题进行分类,并进行相应的校验和阀值设定,对于数据量的波动和ETL异常等情况进行短信和电子邮件告警形式,并支持规则的动态增加。通过这些措施就可以将装入到经营分析系统数据仓库的数据的质量有了一个有效的提升和控制。
其他文献
金属铝配合物因其独有的结构和成键特点被广泛应用于材料科学领域。金属铝配合物具有平面构型,金属铝与配体成键时由于没有d电子的参与,其配位键特性与过渡金属配合物不同,深
连续刚构桥梁兼具连续梁桥与T形刚构桥的受力特点,其受力合理、外形简洁美观、具有良好的行车条件、抗震性能良好。同时其造价较低、施工方法成熟、具有较大的跨越能力、对地
目的探讨黄芩苷对大鼠局灶性脑缺血再灌注损伤的保护作用及其机制.方法 Wistar大鼠随机分为假手术组、脑缺血再灌注模型组、黄芩苷组(50,100和200 mg·kg-1),以及尼莫地
充分利用保存的甘薯种质资源,根据育种目标注重亲本组合的选配,在传统杂交育种中,采用一代甘薯以薯块产量异常突出者选留,二代开始强调品系比较,高世代高指标结合定留,综合性状好者
目的研究分析对中重度癌痛患者实施奥施康定联合华蟾素治疗的临床疗效。方法选取该院中重度癌痛患者(2018年1月-2019年5月,共65例)展开研究,按措施不同分为对照(奥施康定常规
本文研究了利用单片机实现标准信号的输出和信号测量的方法,以及对PF27-4型精密校准仪的研制。
<正>《邯郸学院学报》2009年第4期发表了中华文化学家、红学大师周汝昌先生积数年思考、费数月之功、口述而成的大作《娲皇:中华民族文化之母》。《新华文摘》2010年第7期摘
<正>对于插画的理解,很多人都局限于“小人书”、 “连环画”,其实这仅仅是 插画的一部分。就像《辞海》中对“插画”的解释一样: “插附在书刊中的图 画,有的印在正文中间,
巴洛克艺术风格流行于欧洲十七世纪至十八世纪初,涉及建筑、雕塑、服装等各个艺术领域。巴洛克时期的服装和其它艺术一样呈现的是一种奇异、繁复的艺术风格。服装设计师通过
民主化作为整个政治发展过程中的一个组成环节,在序列上通常包括威权政体的崩溃、民主政体的创设、民主政体的巩固三个阶段。本文以政治转型理论为分析基础,旨在推绎韩国民主