大数据ETL工具的测试设计与实现

来源 :北京邮电大学 | 被引量 : 3次 | 上传用户:jin_sarah
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网发展至今,数据对于一个公司的战略布局与业务发展起着越来越重要的作用。数据抽取(Extraction)、转换(Transformation)和装载(Loading)是数据仓库化的关键环节,对数据仓库数据质量有着重要的影响,各个大型互联网公司对大数据ETL的研究也变得越来越活跃。这样的背景下,研发一个适合自己公司业务数据特点的ETL工具成为很多公司的优先选择。“DT数据管理平台”就是一个公司自主研发的内部使用的ETL工具,“DT”意为“DataTeam”。本文结合软件测试的理论和技术,以及敏捷开发的最佳实践,对“DT数据管理平台”进行测试需求分析,并对功能性测试、非功能性测试和自动化测试进行设计;通过一系列的测试,保障了“DT数据管理平台”高效率、高质量的完成。本文首先介绍了“DT数据管理平台”的背景,课题的主要内容以及本人承担的任务;然后简单介绍了软件测试的理论与技术;接着,详细分析了“DT数据管理平台”的功能性需求、非功能性需求以及自动化测试需求;最后,根据测试用例的设计方法制定测试用例,主要完成了功能测试、压力测试、兼容性测试与自动化测试的覆盖和代码的持续集成,并通过错误管理工具对发现的问题进行管理,不断的跟进、解决问题,推动项目的向前发展。本文通过对“DT数据管理平台”的测试,证明软件测试不仅可以保障软件的可用性与高质量,而且通过项目研发过程中,测试人员的测试与对代码的持续集成,提升整个项目的研发效率。
其他文献
随着糖尿病发病率的增加,糖尿病肾病的发病率也在逐年上升,目前已成为导致慢性肾功能衰竭的主要原因之一.糖尿病肾病发展到终末期肾衰时,往往并存有严重的其它系统的并发症,
期刊
税收作为国家财政收入的主要来源,也是宏观调控的重要手段,而纳税是公民权利和义务的集中体现。目前,我国社会主义市场经济体制不断完善,税收机制全面转型,税收与公民切身利益之间的联系更加紧密。纳税人主体意识、民主意识、法治意识和维权意识不断提高,使得公民对国家税收政策更加关注和敏感。伴随着社会信息化进程的加快,以网络为代表的新技术、新媒体,让每一位公众能够通过网络平台发表自己的看法,表达自己的情绪。近些
加强经济管理工作.是构建社会主义和谐社会的组成部分之一。同样,会计工作也是经济管理的重要组成部分.它是以货币为主要计量单位,利用专门的方法和程序.对各单位经济活动进行核算
期刊
解决“三农”问题必须与时俱进、创新机制、深化改革,在农村劳动力转移、农业产业化经营、农村小集镇建设、农村土地制度改革和农村社会主义民主政治建设等方面取得新的突破。
通用称谓语是称谓语系统的重要组成部分,在人际交往中发挥着重要作用,是交际顺利、有效进行的必要条件。同时它也是中华民族历经几千年发展所积累的一笔丰厚的文化财富,在一定程度上代表着中华传统文化观念。正因如此,能否正确使用通用称谓语在一定程度上代表了留学生的汉语水平,所以通用称谓语教学一直是对外汉语教学的重难点。但目前学界对于对外通用称谓语教学的研究成果十分有限。因此本文在第二语言习得理论的指导下,对留
在这场发布会之前,没有一位中国设计师曾登上这个舞台;在这场发布会之后,这个舞台将张开双臂迎接恒多的中国设计师。
连续性血液净化治疗方法(CBP)目前使用范围日趋广泛,不同的治疗目的,有不同的剂量要求.内环境紊乱的纠正可能需要治疗剂量小,重症患者以清除炎症介质为主要目的,则需要高容量
期刊
在很多行业或领域,2012年可以说是真正的经济寒冬。外部市场需求的持续疲软,西方特别是欧元区的经济低迷,增加了中国出口企业收汇风险和不确定性。面对风险不断加大的海外业务,企
6月21日,“棉花一超乎你的想象⑧”项目携手有“心灵魔术师”之称的知名学者张怡筠博士在北京开讲以“全棉自由行”为主题的媒体课堂。项目揭晓了在主题网站上推出的“全棉自