论文部分内容阅读
摘要：本文从统计部门在当前大数据背景下统计新变革的角度出发，针对当前统计工作面临现状和问题阐述了建立统计信息平台的必要性和迫切性，并从平台建设和架构方面给出设计方案，最后描述了信息平台的主要功能，并对进一步做好信息平台建设提出针对性的建议。
关键词：大数据;信息平台;数据处理
1.引言
面对已经到来的大数据时代，统计部门作为各项调查、统计法规的实施部门，作为对政府提供决策及数据的重要部门，如何在大数据的背景下，将当前统计工作与大数据的开发利用相融合，对多类数据进行统一的存储、整合、快速查询和调用，并加以计算分析，充分挖掘统计数据价值，是新时代对统计工作的新要求，也是本文的主要研究内容。
2.当前统计工作在数据处理和信息化建设所面临的问题
2.1 传统统计工作方法与大数据采集方法优劣对比明显
当前统计工作在多元数据计量还有短时间数据分析方面存在短板，尤其是涉及到各项调查，仍是以抽样调查和全面调查相结合的方式，而大数据将会在较短时间内提供更加全面的总体数据，同时还可具体到单个个体，进行研究，提升了数据质量和利用率，两者优劣对比明显。
2.2现行统计制度在服务和管理方面仍有不足
现行的统计制度和统计标准略微滞后于形势发展的需要，在支撑创新统计标准、统计调查、统计分析和数据共享方面，在为党委政府以及社会公众提供内容丰富、高效及时的现代化统计产品方面仍有不足。
2.3统计数据及政府各部门单位间共享渠道不畅
在信息公开条例中，侧重点往往是政府统计部门对公众的信息公开，对于政府部门之间信息沟通没有详细的规定，缺乏对数据信息统一的标准和明确的责任划分，导致部门间数据共享不及时、不完善。
2.4数据存储存在短板，社会调查耗资较大
在90年代之前，由于电脑还没有普及，统计数据大多用纸质版进行存储，加之业务人员更换、年代久远或历史系统的停用等问题，易造成纸质数据、年鉴数据等诸多历史数据保留不完整，无法进行快速检索和综合分析。
3.数据信息平台建设的基本思路
3.1建设目标
一是建设全局及各县区的文件信息管理系统，以电子发布方式代替传统的电话和传真等通知方式，实现通知、动态等的网站发布;二是建设统计局内部资料管理子系统，对各类规章实行电子化管理，避免因人员或者电脑更换造成资料丢失;三是建设数据库，统筹管理综合、人口、农业、建筑业、服务业、能源、投资、社科、工业、普查等统计数据的实时存储和管理;四是开发部署大数据可视化展示界面，实现分析结果的可视化展现功能，支持可视化图表;五是探索性开展统计分析、文件检索、对比查询等功能。
3.2建设原则
数据信息平台以数据资源整合为重点，坚持“实用、安全、可扩展、易操作”的原则，提高全局工作效率，不断提升统计信息化建设水平。
一是实用性原则。平台应该在实用的基础上考虑先进性和前瞻性，切实满足统计部门业务工作需求。二是安全性原则。平台应支持数据存储、数据传输、密钥管理等安全功能，并提供所有系统操作日志记录，确保系统安全运行。三是可扩展性原则。平台应提供一个弹性架构，支持使用配置而免编程的方式对统计业务流程、调查表样、查询统计等功能的定制与调整。四是易操作性原则。平台需提供简洁、美观、直白的用户界面，符合浏览器通用方式，具备中文支持功能，提供向导式系统安装界面。
4.平台设计
4.1总体架构
用户层：用于局内部数据的导入、存储、汇总、导出、统计分析及各类数据的可视化查看。
应用层：包含后台管理系统的各项功能和前台用户操作层核心功能;对现有数据和信息资源打通和融合，提供监测预警和可视化分析服务。
平台层：基础功能的集群，分为文件信息管理、资料管理、数据管理、数据汇总及权限管理等5个子系统。
数据层：搭建MYSQL主从数据库，保障数据信息平台的数据正常运转。
4.2功能架构
平台功能架构分为前端数据平台和后台管理系统两大类，前端数据主要以网页形式呈现，可以划分为文件资料管理、数据管理和可视化地理标注等多个功能区域及子系统。后台管理系统主要以用户及各类指标管理、信息资料的发布上传为主，共分为用户管理、报表上传、动态发布、通知公告等十一个部分，管理人员会根据每个子系统功能赋予各专业用户相应的权限，完成信息平台的各项功能。
5.平台功能
信息平台搭建完成后，将初步实现以下功能：一是数据入库，将多种格式的数据文件、资料按照统一标准整合入库;二是数据管理，通过工具管理和监控基础数据库中的各种资源和使用情况，实现系统管理;三是数据审核，能检查出原始数据中的各种错误和不一致现象;四是数据查询展示，主要有数据查询、图形展示、简单汇总等功能。
6.做好统计信息平台建设的建议
在平台搭建过程中，还遇到一些问题，比如部分历史数据是纸质版，与现有电子数据格式不统一，会影响汇总、计算及可视化展示等功能的实现，接下来就如何解决这些问题，给出几点建议。
一是加强经费和技术力量的保障，成立平台建设的领导小组，做到分工明确、保障有力;二是保证信息平台数据模式的规范统一，对早期历史数据的追加处理是下一步平台需解决的问题;三是努力实现信息平台与现有“一套表”平台的对接，并在平台上实现“一套表”数据的分析、汇总及可视化展示等功能;四是不断延伸信息平台的功能，在平台设计方面，要充分考虑与国产电脑及软件的安可替代和衔接。
参考文献：
[1]国家统计局大数据应用工作方案.
作者簡介：王国婷（1983.9-），女，汉，山西省阳泉市，高级统计师，研究生，研究方向：统计。
关键词：大数据;信息平台;数据处理
1.引言
面对已经到来的大数据时代，统计部门作为各项调查、统计法规的实施部门，作为对政府提供决策及数据的重要部门，如何在大数据的背景下，将当前统计工作与大数据的开发利用相融合，对多类数据进行统一的存储、整合、快速查询和调用，并加以计算分析，充分挖掘统计数据价值，是新时代对统计工作的新要求，也是本文的主要研究内容。
2.当前统计工作在数据处理和信息化建设所面临的问题
2.1 传统统计工作方法与大数据采集方法优劣对比明显
当前统计工作在多元数据计量还有短时间数据分析方面存在短板，尤其是涉及到各项调查，仍是以抽样调查和全面调查相结合的方式，而大数据将会在较短时间内提供更加全面的总体数据，同时还可具体到单个个体，进行研究，提升了数据质量和利用率，两者优劣对比明显。
2.2现行统计制度在服务和管理方面仍有不足
现行的统计制度和统计标准略微滞后于形势发展的需要，在支撑创新统计标准、统计调查、统计分析和数据共享方面，在为党委政府以及社会公众提供内容丰富、高效及时的现代化统计产品方面仍有不足。
2.3统计数据及政府各部门单位间共享渠道不畅
在信息公开条例中，侧重点往往是政府统计部门对公众的信息公开，对于政府部门之间信息沟通没有详细的规定，缺乏对数据信息统一的标准和明确的责任划分，导致部门间数据共享不及时、不完善。
2.4数据存储存在短板，社会调查耗资较大
在90年代之前，由于电脑还没有普及，统计数据大多用纸质版进行存储，加之业务人员更换、年代久远或历史系统的停用等问题，易造成纸质数据、年鉴数据等诸多历史数据保留不完整，无法进行快速检索和综合分析。
3.数据信息平台建设的基本思路
3.1建设目标
一是建设全局及各县区的文件信息管理系统，以电子发布方式代替传统的电话和传真等通知方式，实现通知、动态等的网站发布;二是建设统计局内部资料管理子系统，对各类规章实行电子化管理，避免因人员或者电脑更换造成资料丢失;三是建设数据库，统筹管理综合、人口、农业、建筑业、服务业、能源、投资、社科、工业、普查等统计数据的实时存储和管理;四是开发部署大数据可视化展示界面，实现分析结果的可视化展现功能，支持可视化图表;五是探索性开展统计分析、文件检索、对比查询等功能。
3.2建设原则
数据信息平台以数据资源整合为重点，坚持“实用、安全、可扩展、易操作”的原则，提高全局工作效率，不断提升统计信息化建设水平。
一是实用性原则。平台应该在实用的基础上考虑先进性和前瞻性，切实满足统计部门业务工作需求。二是安全性原则。平台应支持数据存储、数据传输、密钥管理等安全功能，并提供所有系统操作日志记录，确保系统安全运行。三是可扩展性原则。平台应提供一个弹性架构，支持使用配置而免编程的方式对统计业务流程、调查表样、查询统计等功能的定制与调整。四是易操作性原则。平台需提供简洁、美观、直白的用户界面，符合浏览器通用方式，具备中文支持功能，提供向导式系统安装界面。
4.平台设计
4.1总体架构
用户层：用于局内部数据的导入、存储、汇总、导出、统计分析及各类数据的可视化查看。
应用层：包含后台管理系统的各项功能和前台用户操作层核心功能;对现有数据和信息资源打通和融合，提供监测预警和可视化分析服务。
平台层：基础功能的集群，分为文件信息管理、资料管理、数据管理、数据汇总及权限管理等5个子系统。
数据层：搭建MYSQL主从数据库，保障数据信息平台的数据正常运转。
4.2功能架构
平台功能架构分为前端数据平台和后台管理系统两大类，前端数据主要以网页形式呈现，可以划分为文件资料管理、数据管理和可视化地理标注等多个功能区域及子系统。后台管理系统主要以用户及各类指标管理、信息资料的发布上传为主，共分为用户管理、报表上传、动态发布、通知公告等十一个部分，管理人员会根据每个子系统功能赋予各专业用户相应的权限，完成信息平台的各项功能。
5.平台功能
信息平台搭建完成后，将初步实现以下功能：一是数据入库，将多种格式的数据文件、资料按照统一标准整合入库;二是数据管理，通过工具管理和监控基础数据库中的各种资源和使用情况，实现系统管理;三是数据审核，能检查出原始数据中的各种错误和不一致现象;四是数据查询展示，主要有数据查询、图形展示、简单汇总等功能。
6.做好统计信息平台建设的建议
在平台搭建过程中，还遇到一些问题，比如部分历史数据是纸质版，与现有电子数据格式不统一，会影响汇总、计算及可视化展示等功能的实现，接下来就如何解决这些问题，给出几点建议。
一是加强经费和技术力量的保障，成立平台建设的领导小组，做到分工明确、保障有力;二是保证信息平台数据模式的规范统一，对早期历史数据的追加处理是下一步平台需解决的问题;三是努力实现信息平台与现有“一套表”平台的对接，并在平台上实现“一套表”数据的分析、汇总及可视化展示等功能;四是不断延伸信息平台的功能，在平台设计方面，要充分考虑与国产电脑及软件的安可替代和衔接。
参考文献：
[1]国家统计局大数据应用工作方案.
作者簡介：王国婷（1983.9-），女，汉，山西省阳泉市，高级统计师，研究生，研究方向：统计。