论文部分内容阅读
摘要：本文以“一号工程”数据资源共享为例，提出了一种将“一号工程”、精准打码、塑封贴标、到货确认等物流信息系统数据进行整合，探索在地市级烟草公司构建数据资源共享服务平台的方式，以实现数据资源价值最大化。
关键词：数据共享;烟草;“一号工程”
1引言
“一号工程”即生产经营决策管理系统，是烟草行业最大的信息化工程项目之一，是整个烟草行业数据中心的核心。自2003年上线以来，系统积累了大量的卷烟打扫码标识信息及工商卷烟物流节点资源信息。然而，这些数据资源目前仅仅用于卷烟物流部门开展业务，没有得到充分的共享和高效的利用。
一方面，卷烟分拣记录信息在分拣控制机中的保存时间不够长，导致卷烟送到零售户家里拆开塑封包之后，欲查询某条卷烟是什么时候从哪条分拣线上完成的分拣，当时是谁当班，条烟在分拣线上破损或异常现象具体是怎么发生的，应由哪个人担责……等等，两天之后都无从查起（只能由整个班组承担责任）;另一方面，非物流工作人员，欲借助分拣打码数据库数据核实卷烟的真伪，需要跨部门、跨岗位进行信息沟通，还需要有懂后台数据查询的专业技术人员的配合，信息共享难度较大……基于这些情况，不论在时间还是空间上，基于分拣打码数据资源的共享与应用，都有非常大的提升空间和应用价值等待挖掘。
2 数据共享理论
数据共享，顾名思义，就是通过数据交换平台让不同用户、不同终端能够快速获取所需数据并进行操作、运算、分析。数据共享可以解决部分“信息孤岛”问题，实现数据资源的价值最大化。
关于数据共享实现方法，国内学者们提出了多种研究成果。例如：北京航空航天大学就提出了名为MI-CROS的多模式互联生长模型和SCLDF的数据框架，MI-CROS能将多源异构的大量数据融合在一起，SCLDF框架能够结合具体的数据信息提供相应的服务。复旦大学研发出了科学数据共享平台，其中提供了数据管理、服务、交换、监护等功能。刘铮、路辉、梁玉英等从基于多源数据的多特征融合、基于HTTP协议的网页数据融合、基于概率犹豫模糊Frank加权平均算子的信息集方法等方面提出了数据共享的方法。
综上，数据共享理论研究已经非常成熟，实现数据共享的方法也很多，故在地市级烟草公司构建基于“一号工程”数据资源共的享服务平台完全可以实现。
3 数据资源共享平台建设需求
3.1应用需求
在地市烟草公司，对分拣打码数据资源的共享应用需求，不同岗位、不同人群，各不相同，如图1所示：
1.卷烟定位需求：物流人员需要掌握卷烟的出入库、库存状况和已经分拣的打码到条的条烟所在位置;
2.专卖稽查需求：稽查人员需要查询条烟、件烟的标识码信息确认真伪，以及卷烟串货现象是人为引起还是分拣设备引起;
3.物流跟踪需求：零售户需要及时了解卷烟配送物流状态以及预计到货时间;
4.卷烟溯源需求：消费者需要关注购买卷烟（条）的真伪，以及从零售户购买该卷烟（条）的物流信息。
诸如此上，基于“一号工程”资源构建共享平台，应整合商业库存、商业订单、商业分拣、商业配送、零售户到货确认信息等相关数据新，并把这些数据关联起来，满足不同用户的应用需求。
3.2系统需求
“一号工程”物流数据资源共享平台，需从多个物流子系统中采集数据。为了保证资源共享平台与各物流子系统互不干扰，共享平台构建时应考虑以下需求：
1.数据集中存储管理。数据资源共享平台从分拣打码系统采集到数据后，应保存在独立的存储空间，集中存储管理，保证所有的操作都不应影响到分拣系统的性能。
2.平台易拓展。数据资源共享平台应能够存储当前系统（两年内）产生的数据，以及满足将来业务增长带来的数据增长，具备平行扩展存储能力，支持系统异构，最大限度利用已有设备来提高存储能力，同时不影响整个系统性能。
3.用户响应互动。数据资源共享平台应支持简单灵活的用户查询界面、快速有效的请求响应、实时精确的物流信息。
4.系统无缝衔接。该平台还可与其他物流系统有机集成，能与“一号工程”、精准打码、塑封贴标、零售户到货确认等系统实现无缝衔接和有机集成，以便及时、完整的采集和存储到准确数据。
4 数据资源共享平台设计思路
4.1数据流程
数据共享平台的原始数据来自于一号工程、精准打码、塑封贴标、到货确认等系统，这些系统数据资源种类繁多，数据格式要求也不尽一致。所以从这些系统中抽取原始数据时，首先要对其进行数据清洗，过滤掉错误数据和重复数据，并对数据进行简单转换，保证数据全部转变为统一的可用于后续处理的格式。然后通过ETL工具对预处理后的数据进行融合，形成面向对象的数据结构，存入共享平台的数据库;在该数据库中，各环节数据进行关联，形成可被查询的数据，并能支持大数据访问及数据请求并发响应处理。不同岗位和人群根据订单数据或条烟打码条码等信息，通过数据资源共享平台查询到相应的卷烟物流、订单、真伪等信息，如图2所示：
4.2架构部署
数据共享平台可基于物联网和SOA技术，构建流程化的四层递阶数据平台结构体，即总体结构分为展现层、应用层、数据层、业务层，如图3所示：
（1）业务层负責数据采集，包括商业到货信息、卷烟分拣领用出库信息、条烟打码信息、卷烟配送信息和零售户到货确认信息的解析与采集。
（2）数据层负责提供基础数据和业务数据的存储、整合、关联。
（3）应用层负责提供订单查询、条烟分拣数据查询和条烟打码数据查询。
（4）展现层提供WEB和WAP两种数据展现模式。
服务器部署架构方面，采用虚拟服务器，其中，应用服务器提供基于B/S架构的访问服务，不同角色的用户可以在远程通过浏览器使用查询服务。数据库服务器提供存储服务，同时负责从分拣打码等数据库抽取物流数据存储到本地。
关键词：数据共享;烟草;“一号工程”
1引言
“一号工程”即生产经营决策管理系统，是烟草行业最大的信息化工程项目之一，是整个烟草行业数据中心的核心。自2003年上线以来，系统积累了大量的卷烟打扫码标识信息及工商卷烟物流节点资源信息。然而，这些数据资源目前仅仅用于卷烟物流部门开展业务，没有得到充分的共享和高效的利用。
一方面，卷烟分拣记录信息在分拣控制机中的保存时间不够长，导致卷烟送到零售户家里拆开塑封包之后，欲查询某条卷烟是什么时候从哪条分拣线上完成的分拣，当时是谁当班，条烟在分拣线上破损或异常现象具体是怎么发生的，应由哪个人担责……等等，两天之后都无从查起（只能由整个班组承担责任）;另一方面，非物流工作人员，欲借助分拣打码数据库数据核实卷烟的真伪，需要跨部门、跨岗位进行信息沟通，还需要有懂后台数据查询的专业技术人员的配合，信息共享难度较大……基于这些情况，不论在时间还是空间上，基于分拣打码数据资源的共享与应用，都有非常大的提升空间和应用价值等待挖掘。
2 数据共享理论
数据共享，顾名思义，就是通过数据交换平台让不同用户、不同终端能够快速获取所需数据并进行操作、运算、分析。数据共享可以解决部分“信息孤岛”问题，实现数据资源的价值最大化。
关于数据共享实现方法，国内学者们提出了多种研究成果。例如：北京航空航天大学就提出了名为MI-CROS的多模式互联生长模型和SCLDF的数据框架，MI-CROS能将多源异构的大量数据融合在一起，SCLDF框架能够结合具体的数据信息提供相应的服务。复旦大学研发出了科学数据共享平台，其中提供了数据管理、服务、交换、监护等功能。刘铮、路辉、梁玉英等从基于多源数据的多特征融合、基于HTTP协议的网页数据融合、基于概率犹豫模糊Frank加权平均算子的信息集方法等方面提出了数据共享的方法。
综上，数据共享理论研究已经非常成熟，实现数据共享的方法也很多，故在地市级烟草公司构建基于“一号工程”数据资源共的享服务平台完全可以实现。
3 数据资源共享平台建设需求
3.1应用需求
在地市烟草公司，对分拣打码数据资源的共享应用需求，不同岗位、不同人群，各不相同，如图1所示：
1.卷烟定位需求：物流人员需要掌握卷烟的出入库、库存状况和已经分拣的打码到条的条烟所在位置;
2.专卖稽查需求：稽查人员需要查询条烟、件烟的标识码信息确认真伪，以及卷烟串货现象是人为引起还是分拣设备引起;
3.物流跟踪需求：零售户需要及时了解卷烟配送物流状态以及预计到货时间;
4.卷烟溯源需求：消费者需要关注购买卷烟（条）的真伪，以及从零售户购买该卷烟（条）的物流信息。
诸如此上，基于“一号工程”资源构建共享平台，应整合商业库存、商业订单、商业分拣、商业配送、零售户到货确认信息等相关数据新，并把这些数据关联起来，满足不同用户的应用需求。
3.2系统需求
“一号工程”物流数据资源共享平台，需从多个物流子系统中采集数据。为了保证资源共享平台与各物流子系统互不干扰，共享平台构建时应考虑以下需求：
1.数据集中存储管理。数据资源共享平台从分拣打码系统采集到数据后，应保存在独立的存储空间，集中存储管理，保证所有的操作都不应影响到分拣系统的性能。
2.平台易拓展。数据资源共享平台应能够存储当前系统（两年内）产生的数据，以及满足将来业务增长带来的数据增长，具备平行扩展存储能力，支持系统异构，最大限度利用已有设备来提高存储能力，同时不影响整个系统性能。
3.用户响应互动。数据资源共享平台应支持简单灵活的用户查询界面、快速有效的请求响应、实时精确的物流信息。
4.系统无缝衔接。该平台还可与其他物流系统有机集成，能与“一号工程”、精准打码、塑封贴标、零售户到货确认等系统实现无缝衔接和有机集成，以便及时、完整的采集和存储到准确数据。
4 数据资源共享平台设计思路
4.1数据流程
数据共享平台的原始数据来自于一号工程、精准打码、塑封贴标、到货确认等系统，这些系统数据资源种类繁多，数据格式要求也不尽一致。所以从这些系统中抽取原始数据时，首先要对其进行数据清洗，过滤掉错误数据和重复数据，并对数据进行简单转换，保证数据全部转变为统一的可用于后续处理的格式。然后通过ETL工具对预处理后的数据进行融合，形成面向对象的数据结构，存入共享平台的数据库;在该数据库中，各环节数据进行关联，形成可被查询的数据，并能支持大数据访问及数据请求并发响应处理。不同岗位和人群根据订单数据或条烟打码条码等信息，通过数据资源共享平台查询到相应的卷烟物流、订单、真伪等信息，如图2所示：
4.2架构部署
数据共享平台可基于物联网和SOA技术，构建流程化的四层递阶数据平台结构体，即总体结构分为展现层、应用层、数据层、业务层，如图3所示：
（1）业务层负責数据采集，包括商业到货信息、卷烟分拣领用出库信息、条烟打码信息、卷烟配送信息和零售户到货确认信息的解析与采集。
（2）数据层负责提供基础数据和业务数据的存储、整合、关联。
（3）应用层负责提供订单查询、条烟分拣数据查询和条烟打码数据查询。
（4）展现层提供WEB和WAP两种数据展现模式。
服务器部署架构方面，采用虚拟服务器，其中，应用服务器提供基于B/S架构的访问服务，不同角色的用户可以在远程通过浏览器使用查询服务。数据库服务器提供存储服务，同时负责从分拣打码等数据库抽取物流数据存储到本地。