论文部分内容阅读
〔摘要〕为了解决“数字福建”建设过程中出现的数据异构、信息共享困难的问题，利用云计算在海量数据处理和共享方面的优势，本文构建了基于云计算的电子政务平台，详细阐述了该平台中SaaS、PaaS、IaaS等3种模式，讨论了实现数据共享的虚拟化技术、数据抽取技术、数据转换技术和数据处理技术等关键技术，以期为福建省推动政务信息的深度开发和有效利用提供有益的探索。
〔关键词〕“数字福建”；云计算；数据共享；政务云平台；电子政务
DOI：10.3969/j.issn.1008-0821.2015.10.014
〔中图分类号〕G203〔文献标识码〕A〔文章编号〕1008-0821（2015）10-0076-06
Study of Construction of Government Affairs Data and
Information Sharing Platform of Cloud Computing-based
——A Case of Digital FujianDong LingfengLi Yongzhong
（College of Economics and Management School，Fuzhou University，Fuzhou 350108，China）
〔Abstract〕In order to solve the problem like heterogeneous data and difficult information sharing that appeared in the construction process of“digital Fujian”，this paper exploited the advantages of cloud-computing in data processing and sharing to build e-government platform，it described three modes（SaaS，PaaS，IaaS）of platform in detail，and it discussed the key technology of data sharing，such as virtualization technology，data extraction，data conversion and data processing.it would promote the government information to develop deeply and utilize effectively in Fujian province.
〔Key words〕digital Fujian；cloud computing；information sharing；government clouds platform；e-government
2000年，在时任福建省省长习近平的提倡和推动下，“数字福建”建设开始启动。根据“数字福建”中“十五”、“十一五”、“十二五”规划的目标任务，针对社会需求提出并实施了多项电子政务建设项目，取得了一定的丰硕成果。近年来，福建省政府更加重视“数字福建”平台建设，提出将在2016年基本建设完成智慧城市感知、支撑、服务三大基础平台，同时开发旅游、环境、安全、交通等核心业务的智能化应用，为福建省发展自由贸易区提供了重要的支撑，同时也为福建省成为信息化强省奠定了坚实的基础。党的十八届三中全会提出“加大政府购买公共服务力度”，推动政府购买政务云平台服务是支撑各部门业务应用发展，防止重复建设和投资浪费，促进互联互通和信息共享，增强电子政务安全保障能力的重要手段。政府手中拥有大量的信息，如何高效、准确地利用新技术将各部门信息进行共享和利用，成为电子政务建设的核心和关键问题。《2006-2020国家信息化发展战略》将政务数据资源整合作为电子政务建设的关键战略，加快推进电子政务云平台建设和应用，是推动电子政务健康有序发展的重要任务。
目前国内政务云平台的建设成果斐然，已经先后有深圳、上海、北京和青岛等城市设计出了政务云平台[1]。云计算有着良好的发展前景，我国政府部门出台了一系列政策来促进电子政务云平台的建设与发展。例如，工信部发布了《国家电子政务“十二五”规划》和《基于云计算的电子政务公共平台顶层设计指南》，从顶层设计上为我国政务云平台的建设提供政策支持。为深入贯彻中央网络安全和信息化领导小组关于加快推动信息化发展的重大战略部署，电子政务云平台建设应用工作组秘书处组织编制了《电子政务云平台服务费用计算参考指南》和《电子政务云平台服务考核评估方法》。随着云技术的逐步成熟，福建省智慧城市数据中心建设加入了云计算的概念，通过数据中心的云化建设，更大化地提升了其海量数据的支撑能力。福建省也从顶层设计的高度相应出台了《福建省政府印发2014年“数字福建”工作要点的通知》和《福建省政府关于“数字福建”智慧城市建设的指导意见》等一系列的相关举措，为福建省开展云平台建设提供政策支持。
2015年10月第35卷第10期现？代？情？报Journal of Modern InformationOct，2015Vol35No102015年10月第35卷第10期基于云计算的政务数据信息共享平台构建研究Oct，2015Vol35No101“数字福建”现状分析
从“十一五”“数字福建”提出之后，就一直不断地强调政务数据公开与共享、实现业务协同办理。目前省级部门电子政务网络已经基本建成，市县级电子政务加快推进，已经初步实现了各级政府网站一体化、一站式服务。联合国经济与社会事务部把电子政务建设分为5个发展阶段，而我省电子政务建设正处于第4个阶段（如图1），即提供在线事务处理功能；保障信息安全；整合基础网络并逐步消除部门之间的“信息孤岛”，以实现政务数据资源共享。“数字福建”的建设与先进省市电子政务比较起来还有一定的差距，并存在着突出的问题[2]：图1“数字福建”政务平台框架示意图 23IaaS平台
IaaS为终端用户提供的数据同步、虚拟主机、数据备份和存储等服务，是通过用户所耗费的成本计算收费的，其主要任务是重组政务云平台中的硬件资源，构建虚拟系统，实现服务器、网络和存储的虚拟化。它将底层的IT资源（硬件设备）汇总成一个大的资源池，通过虚拟化技术进行统一管理，供上层应用进行调用和动态分配，其核心部分就是按照用户的需求，提供对应的CPU频率、硬盘空间虚拟机等电子政务高性能计算系统[5]。通过分布式存储技术，将本地存储资源整合到统一的存储网络中，利用网络扩展实现广域网内存储资源的共享。在IaaS中需要将可信计算技术融入平台环境中，以保证向用户提供一个密闭的箱式执行环境，保证了客户虚拟机运行的机密性；此外，它允许用户在启动IaaS前检查是否安全。HDFS（Hadoop distributed file system）是一种具有高容错性的分布式文件系统模型，能够提供高吞吐量的数据访问，适合于大型数据的存储。对于小型数据（比64MB小的文件），可以使用序列文件（SequenceFile）将小文件进行合并成大文件，这将会提高整个系统的存储效率和存储能力。在硬件虚拟化基础上建设的电子政务云平台，分为政府部门数据资源共享云平台和云接入平台两个不同部分。各部门的数据资源共享云是一个政务信息私有云，将云平台中的私有云建成一个资源池，资源池中的数据经过XML的统一处理，变成具有统一格式的结构数据，方便了数据信息资源的调用与管理，并在一定时间内可以保持数据信息同步和备份。接入云平台的主要作用是将各部门数据进行转换、共享和利用，方便公务人员使用政务数据[6-7]。IaaS从公有云、私有云这两个不同的角度上看有着很大差异，这是因为公有云对所有物理资源的优先级别都是一样的，而IaaS的私有云根据用户的权限不同提供不同的服务。为了保证存储数据的安全性，将在IaaS中采取容灾备份技术，通过冗余备份保证系统的高可用性，降低系统的单点故障问题。
3实施政务云平台数据共享的关键技术
31虚拟化技术
虚拟化技术的应用主要涉及服务器、存储、网络、应用等多个方面，不同类型的虚拟化技术从不同的角度上解决了系统性能的问题。
服务器虚拟化可以快速地划分和动态部署服务器资源，以降低系统的复杂度，消除设备的无序蔓延，达到了降低运营成本、提高资产利用率等目的。存储虚拟化将数据资源集中到一个大容量的资源池进行统一管理和调度，实现了无须中断任何程序即可实现存储系统和数据迁移，从而提高了整个系统的动态适应能力。网络虚拟化通过将一个物理网络节点虚拟成多个节点，并将多个交换机整合成一台虚拟交换机，增加了连接数量、降低了网络的复杂度、实现了网络的容量优化。应用虚拟化技术通过动态分配资源的方式来帮助改进服务的交付能力，提高了应用的性能。
政务云平台基于上述虚拟化技术实现了跨越IT架构的全系统虚拟化，对所有的资源进行统一的管理、调度和监控，在无须扩展重要物理资源的前提下，简单而有效地将大量分散的、没有得到充分利用的物理资源，整合成单一的大型虚拟资源，并使其能长时间高效的运行，提高了能源效率和资源利用率。
32政务数据抽取技术
福建省政府已经出台了《福建省省级政务信息共享交换实施办法》政策，规定部署在机关单位的前置服务器，是实现机关单位业务数据库与交换系统对接的计算机系统。此系统需要将政务云平台和政府各部门的业务进行逻辑隔离，保障数据在前置交换系统传输中的安全性与可靠性。为了确保各部门原有系统的运行不受资源整合的影响，保证部门原系统的安全性，需要在前置机和各部门分系统的服务器之间用防火墙进行隔离。前置机将各部门的数据信息资源进行提取，向电子政务云平台提交；同时也接收电子政务云平台中的数据信息资源，向政府部门分系统的服务器进行传输（如图3）。省信息化工作主管部门负责组织机关单位部署前置服务器和前置系统，机关单位负责前置服务器的正常运行与维护；空间中心负责前置系统的日常监控与维护。图3政务数据抽取的前置机系统示意图
33政务数据转换技术
对于“数字福建”建设过程中出现的“信息孤岛”问题，是由于各部门数据异构所致，无法直接进行数据资源的共享，需要通过一种中间格式进行统一标准化。可扩展标记语言（XML）是一种元标记语言，可以实现不同格式数据源之间的交互[8]。XML自我描述性可以适用于异构数据之间的交换，XML文件不仅包含着数据信息，而且还包含着其数据结构，可以清晰地表达数据信息之间的依赖关系。XML可以解决政府数据的异构问题，通过XML将不同部门的数据进行格式统一转换并输出。XML Schema是一个基于XML文档的数据建模工具，用以描述XML文档。由于政府数据是结构化、半结构化和非结构化的数据，在对数据进行交换时，数据表示的主要形式是与XML的组合应用。在完成异构数据库之间的互操作过程之前，首先要定义交换信息的Schema标准结构，然后再把XML数据文件转换映射成标准化模式，实现数据格式的统一性和标准性。
34政务数据处理技术
MapReduce是一种编程模型，可以并行计算和高效处理政府部门中海量的数据，具有较好的扩展性和容错能力。用户只需要在MapReduce中指定Map（映射）函数和Reduce（归约）函数就可以实现并行数据程序处理[9]。MapReduce在运行的时候需要对XML数据进行划分，但这并非真正将其划分成独立的数据块，每个“分阶任务”只是XML数据信息逻辑上的划分，还需要对每一个“分阶任务”进行语义上的解释。利用MapReduce模式进行并行处理，首先需要用软件指定一个Map函数，通过这种方式将一组键值对映射成一组新的键值对，然后指定并发Reduce函数将具有相同键的键值对进行合并，并计算出最终结果，把最终合并后的输出文件导入到目的数据源库中。最后，通过目的数据源库向各个政府部门发布转换后的数据信息资源。
〔关键词〕“数字福建”；云计算；数据共享；政务云平台；电子政务
DOI：10.3969/j.issn.1008-0821.2015.10.014
〔中图分类号〕G203〔文献标识码〕A〔文章编号〕1008-0821（2015）10-0076-06
Study of Construction of Government Affairs Data and
Information Sharing Platform of Cloud Computing-based
——A Case of Digital FujianDong LingfengLi Yongzhong
（College of Economics and Management School，Fuzhou University，Fuzhou 350108，China）
〔Abstract〕In order to solve the problem like heterogeneous data and difficult information sharing that appeared in the construction process of“digital Fujian”，this paper exploited the advantages of cloud-computing in data processing and sharing to build e-government platform，it described three modes（SaaS，PaaS，IaaS）of platform in detail，and it discussed the key technology of data sharing，such as virtualization technology，data extraction，data conversion and data processing.it would promote the government information to develop deeply and utilize effectively in Fujian province.
〔Key words〕digital Fujian；cloud computing；information sharing；government clouds platform；e-government
2000年，在时任福建省省长习近平的提倡和推动下，“数字福建”建设开始启动。根据“数字福建”中“十五”、“十一五”、“十二五”规划的目标任务，针对社会需求提出并实施了多项电子政务建设项目，取得了一定的丰硕成果。近年来，福建省政府更加重视“数字福建”平台建设，提出将在2016年基本建设完成智慧城市感知、支撑、服务三大基础平台，同时开发旅游、环境、安全、交通等核心业务的智能化应用，为福建省发展自由贸易区提供了重要的支撑，同时也为福建省成为信息化强省奠定了坚实的基础。党的十八届三中全会提出“加大政府购买公共服务力度”，推动政府购买政务云平台服务是支撑各部门业务应用发展，防止重复建设和投资浪费，促进互联互通和信息共享，增强电子政务安全保障能力的重要手段。政府手中拥有大量的信息，如何高效、准确地利用新技术将各部门信息进行共享和利用，成为电子政务建设的核心和关键问题。《2006-2020国家信息化发展战略》将政务数据资源整合作为电子政务建设的关键战略，加快推进电子政务云平台建设和应用，是推动电子政务健康有序发展的重要任务。
目前国内政务云平台的建设成果斐然，已经先后有深圳、上海、北京和青岛等城市设计出了政务云平台[1]。云计算有着良好的发展前景，我国政府部门出台了一系列政策来促进电子政务云平台的建设与发展。例如，工信部发布了《国家电子政务“十二五”规划》和《基于云计算的电子政务公共平台顶层设计指南》，从顶层设计上为我国政务云平台的建设提供政策支持。为深入贯彻中央网络安全和信息化领导小组关于加快推动信息化发展的重大战略部署，电子政务云平台建设应用工作组秘书处组织编制了《电子政务云平台服务费用计算参考指南》和《电子政务云平台服务考核评估方法》。随着云技术的逐步成熟，福建省智慧城市数据中心建设加入了云计算的概念，通过数据中心的云化建设，更大化地提升了其海量数据的支撑能力。福建省也从顶层设计的高度相应出台了《福建省政府印发2014年“数字福建”工作要点的通知》和《福建省政府关于“数字福建”智慧城市建设的指导意见》等一系列的相关举措，为福建省开展云平台建设提供政策支持。
2015年10月第35卷第10期现？代？情？报Journal of Modern InformationOct，2015Vol35No102015年10月第35卷第10期基于云计算的政务数据信息共享平台构建研究Oct，2015Vol35No101“数字福建”现状分析
从“十一五”“数字福建”提出之后，就一直不断地强调政务数据公开与共享、实现业务协同办理。目前省级部门电子政务网络已经基本建成，市县级电子政务加快推进，已经初步实现了各级政府网站一体化、一站式服务。联合国经济与社会事务部把电子政务建设分为5个发展阶段，而我省电子政务建设正处于第4个阶段（如图1），即提供在线事务处理功能；保障信息安全；整合基础网络并逐步消除部门之间的“信息孤岛”，以实现政务数据资源共享。“数字福建”的建设与先进省市电子政务比较起来还有一定的差距，并存在着突出的问题[2]：图1“数字福建”政务平台框架示意图 23IaaS平台
IaaS为终端用户提供的数据同步、虚拟主机、数据备份和存储等服务，是通过用户所耗费的成本计算收费的，其主要任务是重组政务云平台中的硬件资源，构建虚拟系统，实现服务器、网络和存储的虚拟化。它将底层的IT资源（硬件设备）汇总成一个大的资源池，通过虚拟化技术进行统一管理，供上层应用进行调用和动态分配，其核心部分就是按照用户的需求，提供对应的CPU频率、硬盘空间虚拟机等电子政务高性能计算系统[5]。通过分布式存储技术，将本地存储资源整合到统一的存储网络中，利用网络扩展实现广域网内存储资源的共享。在IaaS中需要将可信计算技术融入平台环境中，以保证向用户提供一个密闭的箱式执行环境，保证了客户虚拟机运行的机密性；此外，它允许用户在启动IaaS前检查是否安全。HDFS（Hadoop distributed file system）是一种具有高容错性的分布式文件系统模型，能够提供高吞吐量的数据访问，适合于大型数据的存储。对于小型数据（比64MB小的文件），可以使用序列文件（SequenceFile）将小文件进行合并成大文件，这将会提高整个系统的存储效率和存储能力。在硬件虚拟化基础上建设的电子政务云平台，分为政府部门数据资源共享云平台和云接入平台两个不同部分。各部门的数据资源共享云是一个政务信息私有云，将云平台中的私有云建成一个资源池，资源池中的数据经过XML的统一处理，变成具有统一格式的结构数据，方便了数据信息资源的调用与管理，并在一定时间内可以保持数据信息同步和备份。接入云平台的主要作用是将各部门数据进行转换、共享和利用，方便公务人员使用政务数据[6-7]。IaaS从公有云、私有云这两个不同的角度上看有着很大差异，这是因为公有云对所有物理资源的优先级别都是一样的，而IaaS的私有云根据用户的权限不同提供不同的服务。为了保证存储数据的安全性，将在IaaS中采取容灾备份技术，通过冗余备份保证系统的高可用性，降低系统的单点故障问题。
3实施政务云平台数据共享的关键技术
31虚拟化技术
虚拟化技术的应用主要涉及服务器、存储、网络、应用等多个方面，不同类型的虚拟化技术从不同的角度上解决了系统性能的问题。
服务器虚拟化可以快速地划分和动态部署服务器资源，以降低系统的复杂度，消除设备的无序蔓延，达到了降低运营成本、提高资产利用率等目的。存储虚拟化将数据资源集中到一个大容量的资源池进行统一管理和调度，实现了无须中断任何程序即可实现存储系统和数据迁移，从而提高了整个系统的动态适应能力。网络虚拟化通过将一个物理网络节点虚拟成多个节点，并将多个交换机整合成一台虚拟交换机，增加了连接数量、降低了网络的复杂度、实现了网络的容量优化。应用虚拟化技术通过动态分配资源的方式来帮助改进服务的交付能力，提高了应用的性能。
政务云平台基于上述虚拟化技术实现了跨越IT架构的全系统虚拟化，对所有的资源进行统一的管理、调度和监控，在无须扩展重要物理资源的前提下，简单而有效地将大量分散的、没有得到充分利用的物理资源，整合成单一的大型虚拟资源，并使其能长时间高效的运行，提高了能源效率和资源利用率。
32政务数据抽取技术
福建省政府已经出台了《福建省省级政务信息共享交换实施办法》政策，规定部署在机关单位的前置服务器，是实现机关单位业务数据库与交换系统对接的计算机系统。此系统需要将政务云平台和政府各部门的业务进行逻辑隔离，保障数据在前置交换系统传输中的安全性与可靠性。为了确保各部门原有系统的运行不受资源整合的影响，保证部门原系统的安全性，需要在前置机和各部门分系统的服务器之间用防火墙进行隔离。前置机将各部门的数据信息资源进行提取，向电子政务云平台提交；同时也接收电子政务云平台中的数据信息资源，向政府部门分系统的服务器进行传输（如图3）。省信息化工作主管部门负责组织机关单位部署前置服务器和前置系统，机关单位负责前置服务器的正常运行与维护；空间中心负责前置系统的日常监控与维护。图3政务数据抽取的前置机系统示意图
33政务数据转换技术
对于“数字福建”建设过程中出现的“信息孤岛”问题，是由于各部门数据异构所致，无法直接进行数据资源的共享，需要通过一种中间格式进行统一标准化。可扩展标记语言（XML）是一种元标记语言，可以实现不同格式数据源之间的交互[8]。XML自我描述性可以适用于异构数据之间的交换，XML文件不仅包含着数据信息，而且还包含着其数据结构，可以清晰地表达数据信息之间的依赖关系。XML可以解决政府数据的异构问题，通过XML将不同部门的数据进行格式统一转换并输出。XML Schema是一个基于XML文档的数据建模工具，用以描述XML文档。由于政府数据是结构化、半结构化和非结构化的数据，在对数据进行交换时，数据表示的主要形式是与XML的组合应用。在完成异构数据库之间的互操作过程之前，首先要定义交换信息的Schema标准结构，然后再把XML数据文件转换映射成标准化模式，实现数据格式的统一性和标准性。
34政务数据处理技术
MapReduce是一种编程模型，可以并行计算和高效处理政府部门中海量的数据，具有较好的扩展性和容错能力。用户只需要在MapReduce中指定Map（映射）函数和Reduce（归约）函数就可以实现并行数据程序处理[9]。MapReduce在运行的时候需要对XML数据进行划分，但这并非真正将其划分成独立的数据块，每个“分阶任务”只是XML数据信息逻辑上的划分，还需要对每一个“分阶任务”进行语义上的解释。利用MapReduce模式进行并行处理，首先需要用软件指定一个Map函数，通过这种方式将一组键值对映射成一组新的键值对，然后指定并发Reduce函数将具有相同键的键值对进行合并，并计算出最终结果，把最终合并后的输出文件导入到目的数据源库中。最后，通过目的数据源库向各个政府部门发布转换后的数据信息资源。