论文部分内容阅读
摘要:经济社会的发展离不开经济研究与管理工作,数据可以准确反映整个社会的经济运行情况,因此,经济数据必须具备真实性、可信性和时效性,能够为我国的经济发展提供信息保障。数据挖掘技术正是为了统计经济统计工作更好的开展而出现的。本文首先从统计数据挖掘与经济研究的关系及其应用与发展两个方面简要分析,接着就这一新技术在经济统计工作中的重要意义和应用范围进行了探讨,以供相关人士参考和交流。
关键词:数据挖掘;经济研究与管理;统计数据
引言:
准确的提取数据信息,提高经济工作效率是统计数据挖掘重要的研究课题,数据挖掘技术的最大优势就是能够从大量的数据中发现有用的信息并利用多种算法和分析软件对数据进行分析和处理,从而解决经济管理中的实际问题,数据挖掘和经济统计调查工作的结合对于促进经济研究与管理工作的发展具有非常重要的作用。
1 浅析统计数据挖掘在经济研究与管理中的作用
(一)数据的来源
详细的数据为统计工作提供了便捷,推动经济研究与管理的发展,那么人们使用的数据来源于何处,就成为我们值得讨论的话题。如果要问经济学家,他们给出的答案可能是:国家统计局专门提供详细的数据,以便为专业研究提供理论指导。为全面促进经济发展,掌控社会发展的整体局势,我国专门成立了数据统计部门,有专职人员开展数据收集工作,且使用四种相对固定的统计方式:①定期报表;②重点检查项目;③抽样调查;④普查。统计局利用上述方法,安排内部具有专业资质的统计员,深入一线开展数据调查工作。统计者进入生产企业和管理部门,按期采集数据信息,再逐级上报数据信息,最后国家统计局负责归纳、整理相关材料,再面向社会大众公布数据采集的情况,为各企业的生产、经营、管理,提供切实有效的参考数据。
(二)什么是数据挖掘?
数据挖掘(Data Mining)是采用数学的、统计的、人工智能和神经网络等领域的科学方法,如记忆推理、聚类分析、关联分析、决策树、神经网络、基因算法等技术,从大量数据中挖掘出隐含的、先前未知的、对决策有潜在价值的关系、模式和趋势,并用这些知识和规则建立用于决策支持的模型,提供预测性决策支持的方法、工具和过程。当然除了以上所列出的还有时间序列分析等一些其他的功能,数据挖掘的各项功能不是独立存在的,它们在数据挖掘中互相联系,为推动经济管理质量的提升而发挥作用。做好数据挖掘,为全面分析社会经济的发展形势,奠定了良好的基础。
(二)统计数据挖掘与经济研究和管理之间的关系
数据挖掘技术简单来说指的就是一种可以从海量信息数据中,快速、精准锁定所需有用信息数据的技术。在未进行数据挖掘之前,虽然信息数据量较为庞大,但其中有许多信息数据并不完整,甚至存在诸多错误信息数据,而通过使用数据挖掘技术,则可以将其中新颖的、有价值的信息数据准确提取出来,通过对此类精心筛选出的信息数据进行深度处理,从而为经济研究和管理工作提供真实可靠的数据支持。在经济研究与管理的过程中运用数据挖掘技术,可以帮助统计人员快速从众多未加工的经济数据中筛选出有价值的统计数据,并对其进行深入处理与再加工,为相关工作人员分析经济形势、判断经济走向、制定经济决策决议等提供重要数据参考[1]。此外,由于数据挖掘技术并不只是一种简单的数据分析工具,其可以深入结合信息使用者的实际需求,特别是在我国经济不断发展下,经济数据信息量骤增,其对于经济统计技术的要求也越来越高,将数据挖掘技术运用在经济统计当中,能夠有效保障信息评估的可靠性,实现数据处理成效的进一步优化。在运用数据挖掘技术完成对经济数据的深入挖掘与分析处理下,建立起相应的数据库,可以在更好地融合各种数据信息的基础上,为经济管理活动需求提供高质量服务,有效减轻统计人员的工作负荷。
二、如何有效避免数据的失真
数据统计主要分成价值统计和实物统计两个部分,出于各方面的原因,容易出现数据失真的情况。数据的统计错误,给经济管理工作造成了较大的困扰,行业中的技术人员应如何避免此类问题,可参考以下几种方法:
(一)以市场产品的价格为基础
出现数据失真的一类原因,可归纳为市场产品的价格,与实际统计情况相背离。因此数据统计工作应从市场的实际情况出发,按照统计工作的要求,调查人员严格按照部门的有关规定,认真查处、统计市场的真实价格,再结合企业提供的各项数据,尽快做出数据对比,获取符合市场运营规律的真实数据,再将数据进行收集、整理,定期上报统计部门入档、备案。
(二)坚决禁止统计工作的弄虚作假
从统计工作反馈的情况来看,部分企业、个人为保证私有利益,存在上报虚假数据的情况,数据收集的失真,在一定程度上影响了经济发展的局势。统计人员应根据国家的指令、调度,采取切实有效的整改措施,坚决避免虚假信息的上报。召集各类企业负责人,配合抓好党风、政风,做好反腐倡廉的相关工作,从制度层面保证数据的统计质量,确保“源头清洁”,坚决避免数据统计的弄虚作假,才能获取真实有效的信息,才能让数据统计为推动经济发展做出贡献。
三、统计数据挖掘在经济研究与管理中的应用与发展
(一)数据挖掘在经济研究与管理中的应用
数据挖掘技术在经济研究与管理中的应用可以大致的分为两个方向,分别为描述方向和预测方向。描述方向主要包括聚类和描述变量或数据间相关关系的各种算法,聚类是将相关关系较大的变量或个体聚为一类,预测方向主要包括分类和回归,分类的主要工作是“贴标签”,具体算法有决策树、人工神经网络、遗传算法、SVM、朴素贝叶斯模型等。回归不同于分类的是分类是对离散型数据做预测而回归是对连续型数据做预测,回归模型包括线性回归、多项式回归、Lasso回归、岭回归等。聚类在经济研究与管理中最为常见,为了提高调查精度,在抽样调查中可以先将调查对象聚类,再从不同类中分别抽取样本,抽样调查中的分层抽样和整群抽样都可能用到聚类方法。降维方法也广泛的应用于经济研究与管理中,由于统计调查进行一次需要花费大量的人力和物力,所以在统计调查中指标一般较多且详细复杂,这就需要数据挖掘中的降维技术将相关性大的变量合并在一起,从而使数据分析更为简便清晰,主要的降维方法有主成分法、因子分析法等。现阶段降维算法与评价算法相结合已应用于经济评价中,正是由于对数据的大量收集、数据算法的产生、经济数据库的出现、先进的计算机技术、对数据进行精深统计方法计算的能力、数据访问速度的提升等一系列东西的出现,使得数据挖掘技术的作用越来越广泛[2]。由于经济研究与管理中中数据的实用性和准确性的需要,数据挖掘技术也开始慢慢在经济研究与管理中中大展身手。 1、统计分析法
所谓统计分析法其实是指,针对研究对象的规模、范围进行全面分析,找到事物之间的关联性,对企业内部产品消耗的工时,做原始的记录,根据现状分析、整理减少消耗措施,保留企业最大利润的方法。经济数据库字段项之间存在两种关系,相关关系和函数关系。就是对于数据库中的信息利用统计学原理来进行分析。
2、决策树
决策树分析法主要利用概率和图论中的树对,分析经济发展现状,再以此为基础得到一套优质的风险管理方案。这种分析法主要运用了概率论的原理,决策树一般用于预测模型,通过对大量复杂无顺序的数据有目的分类,找到有价值的信息。同时,正是因为描述简单,分类速度快,特别适合运用于经济运行过程中出现的大规模数据的处理。
3、遗传算法
它是一种根据生物遗传机理和自然选择的随机搜索算法,其主要思路是依据特定的社会问题,然后在指定对象中去采集相关信息,最后通过对信息中隐含部分的归整、分析,进而得到结果。经济问题不是固定不变的,相反它是一个不断发展变化的问题,内部的联系千丝万缕,改变其中一项其他的也会相应改变。按照遗传算法的步骤,从源头开始,我们就一步步向下探索,去提取信息数据,对整体进行分析[3],这样就能把经济问题目标化、具体化、直接化,使得在研究问题时可以更加直观,把隐性的表现出来,使得经济研究与管理中工作更加直白、简单。
4、粗集理论法
这是一种探究不确定知识、不精确的数学的工具,它通过上下集比较而出来结果。它易于操作,算法简单;简化输入信息的表达空间;不需要给出额外信息,特别适合分析那些不确定的经济因素,帮助从事经济管理活动的人员,尽量降低不确定因素对经济发展的负面影响。同时正是因为粗集理论法的这种原则,才能使得其与制定经济决策的需求更加接近,也为企业的发展提供了更多的可能性。
5、神经网络法
神经网络法是一种高强度模拟人脑加工信息过程的智能现代信息技术。它和人的神经运动过程一样,首先进行数据的输入,然后进行精准的分析,最后输出。在经济研究与管理中过程中得到了实际的应用。神经网络法为我们提供了一种准确的、完整的处理经济研究与管理中的过程,使得经济运行模式和人在处理信息的过程很相像,一样实用化、形象化、具体化。使经济过程中各个部分之间能取得更好的联系,从而获得对经济研究与管理中问题的处理办法。
(二)数据挖掘在经济研究与管理中的发展
1、能为经济研究与管理中提供有效的服务
数据挖掘技术虽然经历的时间不是很长,然而,它的研究与应用水平已达到了一种相对稳定的状态。随着科学技术的不断发展,数据挖掘技术在各國也普遍受到关注,特别是在经济研究与管理中领域。数据挖掘技术能够这样的的迅速发展,在很大程度上也是依赖于它对经济研究与管理中的有效服务。
2、能够为经济研究与管理中的不同需要提供不同的服务
目前,最常见的数据挖掘工具主要有综合工具、通用型工具、和面向特定应用的工具。综合工具,不仅能够为处于商业中的经济体提供有效的管理报告,并且还能够对普通经济结构中的数据信息经行深入挖掘。通用型工具在市场上占最大比例,其也是在应用方面最为成熟的挖掘工具。面向特定应用工具,从字面来理解,这种工具就是针对特定领域来提供服务的,具有很强的特定性和针对性,它能够有针对性的对经济管理中需要的数据进行挖掘和分析。
3、建立宏观经济数据库,为数据挖掘的应用提供了良好的电子平台
在目前,全国范围内的大部分经济研究与管理部门主要使用的还是应用统计系统。大部分经济研究与管理中的数据信息都处于一种不相聚分散的状态,并没有形成一套有效的管理系统。经济研究与管理过程中一旦出现问题,容易导致经济数据的有效性与准确性受到影响[4]。经济研究与管理部门可以利用数据挖掘基础建立其相关的经济数据库,当建立了宏观经济数据库以后,以上问题就可以寻找到有效的解决办法。宏观经济数据库与数据挖掘技术的合理运用,保证经济研究与管理部门挖掘到的信息的准确性和真实,这不仅满足了现实中经济发展的需要,同时也为经济决策的制定提供了准确、重要的依据。
三、结束语
数据挖掘技术在现代经济研究与管理中占有重要的地位,它是未来统计工作的一种重要技术,精心钻研数据挖掘技术,能推动社会经济的发展,切实做好经济管理的相关工作,更可以实现对数据进行更深层次的分析和处理,且能有效的提升数据分析的质量,以帮助决策者做出更好、更正确的决策。及时更新传统的经济统计方法,扩大数据挖掘技术的使用范围,对提高统计的效率,减少统计时的成本支出具有重要意义。当下应加强对专业人才的培养,利用数据的统计与分析,促使国内的经济发展形势,产生重大的、积极的变革。
参考文献
[1]杨留华. 数据挖掘技术在经济统计调查中的应用[J]. 全国商情·理论研究, 2019, 000(026):55-57.
[2]赵慧. 数据挖掘在统计工作中的应用前景分析[J]. 2021(2017-14):7-7.
[3]刘佩, 常青, 杨卿. 数据挖掘技术在PHM平台构建中的应用[J]. 2020(2014-2):11-13.
[4]徐婧婧. 基于数据挖掘技术的经济统计研究[J]. 中国乡镇企业会计, 2019(03):298-299.
[5]王志勇, 王建宇. 数据挖掘在知识管理系统中的研究与应用[J]. 航天工业管理, 2019.
作者简介;杨军平、性别;男、1987.02、学历;本科,职称;中级,研究方向;健康电子,单位;青岛中科康诺电子信息科技有限公司
关键词:数据挖掘;经济研究与管理;统计数据
引言:
准确的提取数据信息,提高经济工作效率是统计数据挖掘重要的研究课题,数据挖掘技术的最大优势就是能够从大量的数据中发现有用的信息并利用多种算法和分析软件对数据进行分析和处理,从而解决经济管理中的实际问题,数据挖掘和经济统计调查工作的结合对于促进经济研究与管理工作的发展具有非常重要的作用。
1 浅析统计数据挖掘在经济研究与管理中的作用
(一)数据的来源
详细的数据为统计工作提供了便捷,推动经济研究与管理的发展,那么人们使用的数据来源于何处,就成为我们值得讨论的话题。如果要问经济学家,他们给出的答案可能是:国家统计局专门提供详细的数据,以便为专业研究提供理论指导。为全面促进经济发展,掌控社会发展的整体局势,我国专门成立了数据统计部门,有专职人员开展数据收集工作,且使用四种相对固定的统计方式:①定期报表;②重点检查项目;③抽样调查;④普查。统计局利用上述方法,安排内部具有专业资质的统计员,深入一线开展数据调查工作。统计者进入生产企业和管理部门,按期采集数据信息,再逐级上报数据信息,最后国家统计局负责归纳、整理相关材料,再面向社会大众公布数据采集的情况,为各企业的生产、经营、管理,提供切实有效的参考数据。
(二)什么是数据挖掘?
数据挖掘(Data Mining)是采用数学的、统计的、人工智能和神经网络等领域的科学方法,如记忆推理、聚类分析、关联分析、决策树、神经网络、基因算法等技术,从大量数据中挖掘出隐含的、先前未知的、对决策有潜在价值的关系、模式和趋势,并用这些知识和规则建立用于决策支持的模型,提供预测性决策支持的方法、工具和过程。当然除了以上所列出的还有时间序列分析等一些其他的功能,数据挖掘的各项功能不是独立存在的,它们在数据挖掘中互相联系,为推动经济管理质量的提升而发挥作用。做好数据挖掘,为全面分析社会经济的发展形势,奠定了良好的基础。
(二)统计数据挖掘与经济研究和管理之间的关系
数据挖掘技术简单来说指的就是一种可以从海量信息数据中,快速、精准锁定所需有用信息数据的技术。在未进行数据挖掘之前,虽然信息数据量较为庞大,但其中有许多信息数据并不完整,甚至存在诸多错误信息数据,而通过使用数据挖掘技术,则可以将其中新颖的、有价值的信息数据准确提取出来,通过对此类精心筛选出的信息数据进行深度处理,从而为经济研究和管理工作提供真实可靠的数据支持。在经济研究与管理的过程中运用数据挖掘技术,可以帮助统计人员快速从众多未加工的经济数据中筛选出有价值的统计数据,并对其进行深入处理与再加工,为相关工作人员分析经济形势、判断经济走向、制定经济决策决议等提供重要数据参考[1]。此外,由于数据挖掘技术并不只是一种简单的数据分析工具,其可以深入结合信息使用者的实际需求,特别是在我国经济不断发展下,经济数据信息量骤增,其对于经济统计技术的要求也越来越高,将数据挖掘技术运用在经济统计当中,能夠有效保障信息评估的可靠性,实现数据处理成效的进一步优化。在运用数据挖掘技术完成对经济数据的深入挖掘与分析处理下,建立起相应的数据库,可以在更好地融合各种数据信息的基础上,为经济管理活动需求提供高质量服务,有效减轻统计人员的工作负荷。
二、如何有效避免数据的失真
数据统计主要分成价值统计和实物统计两个部分,出于各方面的原因,容易出现数据失真的情况。数据的统计错误,给经济管理工作造成了较大的困扰,行业中的技术人员应如何避免此类问题,可参考以下几种方法:
(一)以市场产品的价格为基础
出现数据失真的一类原因,可归纳为市场产品的价格,与实际统计情况相背离。因此数据统计工作应从市场的实际情况出发,按照统计工作的要求,调查人员严格按照部门的有关规定,认真查处、统计市场的真实价格,再结合企业提供的各项数据,尽快做出数据对比,获取符合市场运营规律的真实数据,再将数据进行收集、整理,定期上报统计部门入档、备案。
(二)坚决禁止统计工作的弄虚作假
从统计工作反馈的情况来看,部分企业、个人为保证私有利益,存在上报虚假数据的情况,数据收集的失真,在一定程度上影响了经济发展的局势。统计人员应根据国家的指令、调度,采取切实有效的整改措施,坚决避免虚假信息的上报。召集各类企业负责人,配合抓好党风、政风,做好反腐倡廉的相关工作,从制度层面保证数据的统计质量,确保“源头清洁”,坚决避免数据统计的弄虚作假,才能获取真实有效的信息,才能让数据统计为推动经济发展做出贡献。
三、统计数据挖掘在经济研究与管理中的应用与发展
(一)数据挖掘在经济研究与管理中的应用
数据挖掘技术在经济研究与管理中的应用可以大致的分为两个方向,分别为描述方向和预测方向。描述方向主要包括聚类和描述变量或数据间相关关系的各种算法,聚类是将相关关系较大的变量或个体聚为一类,预测方向主要包括分类和回归,分类的主要工作是“贴标签”,具体算法有决策树、人工神经网络、遗传算法、SVM、朴素贝叶斯模型等。回归不同于分类的是分类是对离散型数据做预测而回归是对连续型数据做预测,回归模型包括线性回归、多项式回归、Lasso回归、岭回归等。聚类在经济研究与管理中最为常见,为了提高调查精度,在抽样调查中可以先将调查对象聚类,再从不同类中分别抽取样本,抽样调查中的分层抽样和整群抽样都可能用到聚类方法。降维方法也广泛的应用于经济研究与管理中,由于统计调查进行一次需要花费大量的人力和物力,所以在统计调查中指标一般较多且详细复杂,这就需要数据挖掘中的降维技术将相关性大的变量合并在一起,从而使数据分析更为简便清晰,主要的降维方法有主成分法、因子分析法等。现阶段降维算法与评价算法相结合已应用于经济评价中,正是由于对数据的大量收集、数据算法的产生、经济数据库的出现、先进的计算机技术、对数据进行精深统计方法计算的能力、数据访问速度的提升等一系列东西的出现,使得数据挖掘技术的作用越来越广泛[2]。由于经济研究与管理中中数据的实用性和准确性的需要,数据挖掘技术也开始慢慢在经济研究与管理中中大展身手。 1、统计分析法
所谓统计分析法其实是指,针对研究对象的规模、范围进行全面分析,找到事物之间的关联性,对企业内部产品消耗的工时,做原始的记录,根据现状分析、整理减少消耗措施,保留企业最大利润的方法。经济数据库字段项之间存在两种关系,相关关系和函数关系。就是对于数据库中的信息利用统计学原理来进行分析。
2、决策树
决策树分析法主要利用概率和图论中的树对,分析经济发展现状,再以此为基础得到一套优质的风险管理方案。这种分析法主要运用了概率论的原理,决策树一般用于预测模型,通过对大量复杂无顺序的数据有目的分类,找到有价值的信息。同时,正是因为描述简单,分类速度快,特别适合运用于经济运行过程中出现的大规模数据的处理。
3、遗传算法
它是一种根据生物遗传机理和自然选择的随机搜索算法,其主要思路是依据特定的社会问题,然后在指定对象中去采集相关信息,最后通过对信息中隐含部分的归整、分析,进而得到结果。经济问题不是固定不变的,相反它是一个不断发展变化的问题,内部的联系千丝万缕,改变其中一项其他的也会相应改变。按照遗传算法的步骤,从源头开始,我们就一步步向下探索,去提取信息数据,对整体进行分析[3],这样就能把经济问题目标化、具体化、直接化,使得在研究问题时可以更加直观,把隐性的表现出来,使得经济研究与管理中工作更加直白、简单。
4、粗集理论法
这是一种探究不确定知识、不精确的数学的工具,它通过上下集比较而出来结果。它易于操作,算法简单;简化输入信息的表达空间;不需要给出额外信息,特别适合分析那些不确定的经济因素,帮助从事经济管理活动的人员,尽量降低不确定因素对经济发展的负面影响。同时正是因为粗集理论法的这种原则,才能使得其与制定经济决策的需求更加接近,也为企业的发展提供了更多的可能性。
5、神经网络法
神经网络法是一种高强度模拟人脑加工信息过程的智能现代信息技术。它和人的神经运动过程一样,首先进行数据的输入,然后进行精准的分析,最后输出。在经济研究与管理中过程中得到了实际的应用。神经网络法为我们提供了一种准确的、完整的处理经济研究与管理中的过程,使得经济运行模式和人在处理信息的过程很相像,一样实用化、形象化、具体化。使经济过程中各个部分之间能取得更好的联系,从而获得对经济研究与管理中问题的处理办法。
(二)数据挖掘在经济研究与管理中的发展
1、能为经济研究与管理中提供有效的服务
数据挖掘技术虽然经历的时间不是很长,然而,它的研究与应用水平已达到了一种相对稳定的状态。随着科学技术的不断发展,数据挖掘技术在各國也普遍受到关注,特别是在经济研究与管理中领域。数据挖掘技术能够这样的的迅速发展,在很大程度上也是依赖于它对经济研究与管理中的有效服务。
2、能够为经济研究与管理中的不同需要提供不同的服务
目前,最常见的数据挖掘工具主要有综合工具、通用型工具、和面向特定应用的工具。综合工具,不仅能够为处于商业中的经济体提供有效的管理报告,并且还能够对普通经济结构中的数据信息经行深入挖掘。通用型工具在市场上占最大比例,其也是在应用方面最为成熟的挖掘工具。面向特定应用工具,从字面来理解,这种工具就是针对特定领域来提供服务的,具有很强的特定性和针对性,它能够有针对性的对经济管理中需要的数据进行挖掘和分析。
3、建立宏观经济数据库,为数据挖掘的应用提供了良好的电子平台
在目前,全国范围内的大部分经济研究与管理部门主要使用的还是应用统计系统。大部分经济研究与管理中的数据信息都处于一种不相聚分散的状态,并没有形成一套有效的管理系统。经济研究与管理过程中一旦出现问题,容易导致经济数据的有效性与准确性受到影响[4]。经济研究与管理部门可以利用数据挖掘基础建立其相关的经济数据库,当建立了宏观经济数据库以后,以上问题就可以寻找到有效的解决办法。宏观经济数据库与数据挖掘技术的合理运用,保证经济研究与管理部门挖掘到的信息的准确性和真实,这不仅满足了现实中经济发展的需要,同时也为经济决策的制定提供了准确、重要的依据。
三、结束语
数据挖掘技术在现代经济研究与管理中占有重要的地位,它是未来统计工作的一种重要技术,精心钻研数据挖掘技术,能推动社会经济的发展,切实做好经济管理的相关工作,更可以实现对数据进行更深层次的分析和处理,且能有效的提升数据分析的质量,以帮助决策者做出更好、更正确的决策。及时更新传统的经济统计方法,扩大数据挖掘技术的使用范围,对提高统计的效率,减少统计时的成本支出具有重要意义。当下应加强对专业人才的培养,利用数据的统计与分析,促使国内的经济发展形势,产生重大的、积极的变革。
参考文献
[1]杨留华. 数据挖掘技术在经济统计调查中的应用[J]. 全国商情·理论研究, 2019, 000(026):55-57.
[2]赵慧. 数据挖掘在统计工作中的应用前景分析[J]. 2021(2017-14):7-7.
[3]刘佩, 常青, 杨卿. 数据挖掘技术在PHM平台构建中的应用[J]. 2020(2014-2):11-13.
[4]徐婧婧. 基于数据挖掘技术的经济统计研究[J]. 中国乡镇企业会计, 2019(03):298-299.
[5]王志勇, 王建宇. 数据挖掘在知识管理系统中的研究与应用[J]. 航天工业管理, 2019.
作者简介;杨军平、性别;男、1987.02、学历;本科,职称;中级,研究方向;健康电子,单位;青岛中科康诺电子信息科技有限公司