论文部分内容阅读
摘 要:本篇文章通过实际的数据测试应用,经过多次的数据测试开发一套统一的数据接口,这样可以满足许多企业对数据的要求,各个企业可以在短时间内实现数据资源的共享。
关键词:海量;数据处理;接口;关键技术
海量数据处理关键技术以制造业信息化系统为研究背景,根据许多种结构不同的海量数据处理进行交换性强的数据沟通,其中系统中每一个设计开发都是统一用一个数据接口程序。
1 接口设计关键技术
本篇文章所谈及的接口设计,是根据制造企业在进行信息化基础建设而设计的,数据资源中明确显示所涉及到的各种生产设备。仓库统计的数据会与企业所记录的数据相符合,这样在上层决策系统中就会有一个数据处理的痕迹。
首先,要规定一块特定的智能识别板块,它的主要工作内容是要识别所有系统中的数据来源及该数据所服务的企业部门;其次,还要设有专门的标准化模版,这个设置主要是为了可以把所有系统中的数据进行规范性格式,有些数据可能在根源上就会出现识别排斥,由于格式的不同造成海量数据接口难以识别;最后,还会有一个专门的数据接收模块,他的工作主要是服务于企业各个系統的数据,在此之上可以智能的接收并且智能的对这些操作口令加以处理。
2 数据接口必须具有如下特点
2.1 海量处理能力
数据接口会具有以下许多特点,其中最主要突出的就是数据的海量处理能力,许多大公司所设置的信息系统都是每天进行更换,这些数据会在一天结束以后进行更新处理。如果要对系统中的数据互相交流,就需要提高数据接口的处理能力,这样数据就可以在短时间内得到合理性、规范性和系统性的处理。
2.2 智能识别性
大多数数据来源于不同企业的不同系统,每一个企业为了保护自身的安全,会设置一套独特的信息识别系统。这样虽然给自身企业提高了安全,但是同时也给数据处理增加了难度,当不同的企业不同的数据进行规范性统一时,由于数据格式的不同,这些数据很难在短时间内相融合。因此,这就需要海量数据接口要具有很强的智能识别能力,会在短时间内对这些数据进行融合性处理。
2.3 数据结合性
数据处理中最重要的就是数据接口要具有一定的数据结合性,在企业的内部和外部都会设有许多的信息化系统,这些信息格式相异的信息系统保障着整个企业的安全运行,可见数据结合性这一性能对海量数据接口来说是十分重要的。
2.4 实时性
数据处理不仅需要在短时间内完成,还需要具有一定的实时性,如果数据处理缓慢,就会跟不上信息系统内数据的整体变换。这样就可以在短时间内确定数据的准确性、系统性及完整性,但是最重要的一点就是信息数据处理的实时性。
3 海量数据处理技术
3.1 实时、定时队列
海量数据处理技术多种多样,其中最重要的一项就是实时、定时队列技术,简单来说就是对一些企业特殊需求进行数据队列服务。这些数据会通过统一的数据处理接口,在进行系统性的智能识别,将数据在系统中放置到队列当中,这样可以快速的将任务插入在海量数据之中。插入的任务数据就会在其他的系统中显示出来,如果是定时队列所排列的海量数据,这样系统就可以在工作闲余之后进行处理。
3.2 多维数据库技术
多维数据库采用的是统一的端口服务,这样可以在短时间内高效地整合各企业的共享数据资源,这种多维的数据库一般较为集中,所建设的目的也只是为了提高工作的效率。这样可以在短时间内将分散的数据资源集中在一起,将需要共享的资源集中在数据库进行统一的处理。并且多维的数据程序采用的是继承的概念,这样可以有效规避海量数据处理时所出现的一些问题。
3.3 列表技术
列表技术简单来说就是利用储存功能,提高信息数据传递的服务水平,首先,我们需要将所有的信息存放于计算机内存条中,然后通过专门的快速搜索方法,进行不间断的计算机内部储存扫描。通过列表技术这种方式,可以系统性的建立一套完整的多线程数据系统,多线程数据系统最大的优势就是通过片段的时间轮轴运转。这样就可以在短时间内充分的利用计算机的内部储存空间,提高海量数据资源的共享效率,并且还可以在一定程度上提高数据处理的总量。
4 结语
本篇文章主要依据制造企业之间信息共享的特点,简单来说就是数据共享及数据之间的互相传递,我们可以将所有的数据进行一个统一的处理,然后再对这些数据专门设定一个接口程序。这样就可以在短时间内将这些动态的数据进行传递,并且在短时间内实现高效共享数据资源,为了确保该项技术的顺利实施,我们可以通过大量的实践加以证明。
参考文献:
[1] 张文生,丁辉.基于邻域原理计算海量数据支持向量的研究[J].软件学报,2001.
[2] 任力安,何清.一种新的海量数据分类方法[J].计算机工程与应用,2002.
[3] 卓桂荣,袁剑雄.并联机床海量数据文件的处理[J].哈尔滨理工大学学报,2002.
[4] 艾菊梅,陆玲.海量数据的存储与高速查询方案设计与研究[J].计算机辅助工程,2003.
关键词:海量;数据处理;接口;关键技术
海量数据处理关键技术以制造业信息化系统为研究背景,根据许多种结构不同的海量数据处理进行交换性强的数据沟通,其中系统中每一个设计开发都是统一用一个数据接口程序。
1 接口设计关键技术
本篇文章所谈及的接口设计,是根据制造企业在进行信息化基础建设而设计的,数据资源中明确显示所涉及到的各种生产设备。仓库统计的数据会与企业所记录的数据相符合,这样在上层决策系统中就会有一个数据处理的痕迹。
首先,要规定一块特定的智能识别板块,它的主要工作内容是要识别所有系统中的数据来源及该数据所服务的企业部门;其次,还要设有专门的标准化模版,这个设置主要是为了可以把所有系统中的数据进行规范性格式,有些数据可能在根源上就会出现识别排斥,由于格式的不同造成海量数据接口难以识别;最后,还会有一个专门的数据接收模块,他的工作主要是服务于企业各个系統的数据,在此之上可以智能的接收并且智能的对这些操作口令加以处理。
2 数据接口必须具有如下特点
2.1 海量处理能力
数据接口会具有以下许多特点,其中最主要突出的就是数据的海量处理能力,许多大公司所设置的信息系统都是每天进行更换,这些数据会在一天结束以后进行更新处理。如果要对系统中的数据互相交流,就需要提高数据接口的处理能力,这样数据就可以在短时间内得到合理性、规范性和系统性的处理。
2.2 智能识别性
大多数数据来源于不同企业的不同系统,每一个企业为了保护自身的安全,会设置一套独特的信息识别系统。这样虽然给自身企业提高了安全,但是同时也给数据处理增加了难度,当不同的企业不同的数据进行规范性统一时,由于数据格式的不同,这些数据很难在短时间内相融合。因此,这就需要海量数据接口要具有很强的智能识别能力,会在短时间内对这些数据进行融合性处理。
2.3 数据结合性
数据处理中最重要的就是数据接口要具有一定的数据结合性,在企业的内部和外部都会设有许多的信息化系统,这些信息格式相异的信息系统保障着整个企业的安全运行,可见数据结合性这一性能对海量数据接口来说是十分重要的。
2.4 实时性
数据处理不仅需要在短时间内完成,还需要具有一定的实时性,如果数据处理缓慢,就会跟不上信息系统内数据的整体变换。这样就可以在短时间内确定数据的准确性、系统性及完整性,但是最重要的一点就是信息数据处理的实时性。
3 海量数据处理技术
3.1 实时、定时队列
海量数据处理技术多种多样,其中最重要的一项就是实时、定时队列技术,简单来说就是对一些企业特殊需求进行数据队列服务。这些数据会通过统一的数据处理接口,在进行系统性的智能识别,将数据在系统中放置到队列当中,这样可以快速的将任务插入在海量数据之中。插入的任务数据就会在其他的系统中显示出来,如果是定时队列所排列的海量数据,这样系统就可以在工作闲余之后进行处理。
3.2 多维数据库技术
多维数据库采用的是统一的端口服务,这样可以在短时间内高效地整合各企业的共享数据资源,这种多维的数据库一般较为集中,所建设的目的也只是为了提高工作的效率。这样可以在短时间内将分散的数据资源集中在一起,将需要共享的资源集中在数据库进行统一的处理。并且多维的数据程序采用的是继承的概念,这样可以有效规避海量数据处理时所出现的一些问题。
3.3 列表技术
列表技术简单来说就是利用储存功能,提高信息数据传递的服务水平,首先,我们需要将所有的信息存放于计算机内存条中,然后通过专门的快速搜索方法,进行不间断的计算机内部储存扫描。通过列表技术这种方式,可以系统性的建立一套完整的多线程数据系统,多线程数据系统最大的优势就是通过片段的时间轮轴运转。这样就可以在短时间内充分的利用计算机的内部储存空间,提高海量数据资源的共享效率,并且还可以在一定程度上提高数据处理的总量。
4 结语
本篇文章主要依据制造企业之间信息共享的特点,简单来说就是数据共享及数据之间的互相传递,我们可以将所有的数据进行一个统一的处理,然后再对这些数据专门设定一个接口程序。这样就可以在短时间内将这些动态的数据进行传递,并且在短时间内实现高效共享数据资源,为了确保该项技术的顺利实施,我们可以通过大量的实践加以证明。
参考文献:
[1] 张文生,丁辉.基于邻域原理计算海量数据支持向量的研究[J].软件学报,2001.
[2] 任力安,何清.一种新的海量数据分类方法[J].计算机工程与应用,2002.
[3] 卓桂荣,袁剑雄.并联机床海量数据文件的处理[J].哈尔滨理工大学学报,2002.
[4] 艾菊梅,陆玲.海量数据的存储与高速查询方案设计与研究[J].计算机辅助工程,2003.