论文部分内容阅读
随着资本市场的完善证券业的经营活动日益规范,为了保证证券市场的公开、公平与公正,证券监管机构要求证券公司上报各类监管报表,证券监管报表数量多、上报周期短、报表内容涉及证券公司经营活动的各个方面,传统的上报方式需要业务人员在报送期查询处理大量的业务数据,并进行手工处理,对证券公司而言,这些监管报表的极大的加大了业务人员的工作量,而且需要花大量精力保证监管报表数据的准确。为了顺应证券监管机构报表监管要求,减轻原先公司总部及营业部监管报表报送的压力,保证报表数据的准确性和完整性,公司提出开发全新的、应用性的证券公司报表报送系统。
尽管理论界早有大量数据集市构建、ETL框架设计等研究成果,但在系统实际应用开发过程中,证券公司独特的数据环境导致的现实难题,需要根据具体情况对相关技术进行改进,设计出整套解决方案,并在此基础上进行提高,探索出一些较为通用的规则和架构,最终开发出符合证券公司特点的报表报送系统。
本文主要在系统开发中就ETL过程中遇到的现实问题进行了全盘考虑和整体处理,设计符合证券公司实际数据环境的ETL平台,并构建了满足证券公司报表系统的后台数据集市。ETL过程中通过DTS的控制,结合代码编程控制业务逻辑的实现,完成报表数据的处理。实现了符合报表系统实际需要的数据集市设计,根据总部各部门与营业部的报表需求,设计和实现了结构合理、适合分析的数据集市。系统的应用实现,不仅完成了数据集市的设计目标,更实现了公司内聚ETL平台,为后续其他分析报表的制作以及更长远的数据挖掘的实现打下了一定的数据基础。另外在证券公司现有的网络构架体系上,解决不同网段内生产系统后台数据的采集难题,并将报表系统融入到公司网络整体安全体系,从实际应用的角度进行报表系统的部署。