【摘 要】
:
近年来,随着社保建设的各项制度逐步建立完善,覆盖范围不断扩大,社会保障的信息化建设也遇到了新的挑战。社保各业务数据库管理系统经长年运作,积累了大量业务数据,同时部门
论文部分内容阅读
近年来,随着社保建设的各项制度逐步建立完善,覆盖范围不断扩大,社会保障的信息化建设也遇到了新的挑战。社保各业务数据库管理系统经长年运作,积累了大量业务数据,同时部门之间业务数据也存在不规范、不统一的问题。为了解决这些问题,本文提出了构建面向社保数据的数据仓库并实现了基于预运算的社保数据仓库分析系统。本文主要描述了一个基于预运算的社保数据仓库分析系统的设计与实现。本系统使用Sqoop和Flume分别采集社保业务数据库文件和服务端的日志文件,采集的数据分别存储在Hive和Kafka,并在Hive上构建数据仓库。然后,通过OLAP分析工具对业务数据进行多维分析。本系统架构支持ROLAP引擎和MOLAP引擎,分别是使用Impala查询引擎和Kylin分析引擎,其中系统的预运算模块主要基于Kylin组件实现的。决策者根据分析需求选择OLAP引擎,通过访问网页的形式进行交互式的OLAP查询,查询结果以表格、图形等可视化方式直观地反馈给决策者。接着,本文还提出了对系统关键技术的一些研究与改进,主要是对预运算技术进行了部分改进,包括改造字典编码算法实现分段计算和重新设计位图运算的实现。另外,本系统增加了元数据自动化配置功能并优化了OLAP查询的缓存方式。本文最后对系统进行了全面的功能测试和性能测试。测试结果表明,基于预运算的社保数据仓库分析系统的响应延迟达到了秒级甚至毫秒级,远小于传统的基于ROLAP的解决方案。另外,系统改进后的部分与改进前进行了对比测试,测试结果表明,改进后的系统确实优化了系统性能并提高了系统运行效率。
其他文献
我国地方债形势严峻,基础设施建设资金缺口巨大,而私营经济的迅速发展为其参与基础设施建设奠定了坚实的物质基础,PPP模式应运而生。基于此,本文在分析我国PPP模式发展现状的
从南美引入我国的喜旱莲子草是一种水陆两栖的外来入侵植物。该种分布广,常以中空的茎在水面形成漂浮植毡层。喜旱莲子草快速的生长和扩散能力已对生态系统和社会经济发展造
法院对宅基地政策的执行是一个颇具中国特色的法律问题。对这一问题,理论界通常围绕着宅基地政策能否作为民法渊源展开讨论。但在《民法总则》第10条已经不再将国家政策作为
抗日战争时期中共中央驻扎的陕甘宁边区,在中国共产党领导的众多抗日根据地中发挥了模范作用。陕甘宁边区的中共农村支部是在中共中央和西北局共同指导下领导边区广大农村党
随着LED制造技术的发展,AlInGaN基紫外LED的性能也在稳步提升,将替代传统汞灯逐步成为新一代的紫外光源。目前紫外LED的波段逐渐往深紫外短波方向发展,辐照强度也往大功率方
呼吸道疾病已连年列成都市居民死因首位。文献调查发现,成都市肺癌发病率年增长高达44%,此现象可能与大气污染有关。对呼吸道疾病与大气污染的相关性研究目前大都集中于大气
研究背景心肌梗塞(myocardial infarction,MI)仍然是世界上发病率和死亡率最高心血管疾病。心梗后缺氧缺血以及氧化应激产物蓄积导致心肌细胞凋亡,而凋亡细胞释放的有毒物质
本文在经典风险模型的基础上,围绕着保费收取过程、理赔额发生过程及理赔额序列及它们之间的关系进行了推广,并把利率因素、退保因素、再保险情况及带干扰等因素考虑进去,讨论了
通过对竹筒直径的测量,得到试验材料平行段并进行取样,再通过端面扫描进行验证。通过对竹黄片拉伸性能测试,得知其拉伸强度平均值为61.37 MPa,竹筒内以及竹筒间强度变异性很
人口老龄化问题,已成为本世纪的世界性难题。我国从1999年进入老龄社会,近年间老年人口数量迅速增加,老龄化已是我国人口问题的核心,是一个关系全局的重大社会问题,必将对家