计算机数据挖掘概念及应用的探讨

来源 :科学导报·学术 | 被引量 : 0次 | 上传用户:zhuqs
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  摘  要:数据挖掘是日常生活的一部分,虽然我们常常没有意识到它的存在。但是影响到我们日常生活的各方面,从当地超市供应的商品、网上冲浪看到的广告,到犯罪预防。通过改进服务和提高顾客满意度,以及生活方式,为个人带来许多好处。然而,数据挖掘应用也会严重地威胁到个人隐私权和數据安全。数据挖掘系统和应用的开发是目前研究的难题,本文通过文献综述的方式对数据挖掘进行讨论,其目的是为了引起更多人的关注和更深入的研究。
  关键词:计算机;数据挖掘;概念;应用
  引言
  近年来,数据挖掘引起了信息产业界的极大关注,其主要原因是存在大量数据,可以广泛使用,并且迫切需要将这些数据转换成有用的信息和知识。作为一个新兴的研究领域,自从20世纪80年代开始以来,数据挖掘在国外已经取得了显著进展且涵盖了广泛的应用。目前,在很多领域尤其是在商业领域如银行、电信、电商等,数据挖掘可以解决很多问题,包括市场营销策略制定、背景分析、企业管理危机等。
  1、数据挖掘概述
  数据挖掘(data mining)其英文名可以翻译为数据采矿,实际上指的是从大量的数据中获取所需要的有用信息,数据挖掘在各个行业都有着广泛的应用。数据挖掘又被称为“数据中的知识发现”(KDD),顾名思义,也就是通过数据清理、数据集成、数据选择、数据变换、数据挖掘、模式评估、知识表示等一些列步骤,对数据进行分类、聚类,发现其中的关联关系或者离群点,来发现新的知识[1]。例如金融大数据领域的信贷机构可以通过数据挖掘实现对用户的信用评级、零售行业各地区顾客不同种类商品的需求和购买习惯、电信行业数据分析、生物学领域中的基因数据分析等等。至此,便可以简单的理解清楚数据挖掘的概念。
  对数据挖掘有多种文字不同但含义接近的定义,其实顾名思义,数据挖掘就是试图从海量数据中找出有用的知识。数据挖掘可以视为机器学习和数据库的交叉,它主要利用机器学习界提供的技术来分析海量数据,利用数据库界提供的技术来管理海量数据。
  2、数据挖掘的特征
  2.1基于大量数据
  实际上大多数数据挖掘的算法都可以在小数据量上运行并得到结果。但是,一方面过小的数据量完全可以通过人工分析来总结规律,另一方面来说,小数据量常常无法反映出真实世界中的普遍特性。
  2.2非平凡性
  挖掘出来的知识应该是不简单的,绝不能是类似某著名体育评论员所说的“经过我的计算,我发现了一个有趣的现象,到本场比赛结束为止,这届世界杯的进球数和失球数是一样的。非常的巧合!”那种知识。这点看起来勿庸赘言,但是很多不懂业务知识的数据挖掘新手却常常犯这种错误。
  2.3隐含性
  数据挖掘是要发现深藏在数据内部的知识,而不是那些直接浮现在数据表面的信息。常用的BI工具,例如报表和OLAP,完全可以让用户找出这些信息。
  2.4新奇性
  挖掘出来的知识应该是以前未知的,否则只不过是验证了业务专家的经验而已。只有全新的知识,才可以帮助企业获得进一步的洞察力。
  2.5价值性
  给企业带来直接的或间接的效益。有人说数据挖掘看起来神乎其神,却什么用处也没有。这是一种误解,在一些数据挖掘项目中,或者因为缺乏明确的业务目标,或者因为数据质量的不足,或者因为人们对改变业务流程的抵制,或者因为挖掘人员的经验不足,都会导致效果不佳甚至完全没有效果。但大量的成功案例也在证明,数据挖掘的确可以变成提升效益的利器。
  3、数据挖掘的应用领域
  3.1金融数据分析领域的应用
  大部分银行和金融机构都提供丰富多样的银行业务、投资和信贷服务例如交易、抵押、汽车贷款和信用卡等。有些还提供保险服务和股票投资服务。银行和金融机构收集的金融数据通常相对完整、可靠,并具有高质量,这大大方便了系统的数据分析和数据挖掘[2]。例如,为多维数据分析和数据挖掘设计和构造数据仓库,可以进行贷款偿还预测和顾客信用政策分析,针对定向促销的顾客分类与聚类,用于洗黑钱和其他金融犯罪的侦破等。
  3.2零售和电信业领域的应用
  零售业是非常合适的数据挖掘应用领域,因为它收集了关于销售、顾客购物史、货物运输、消费和服务的大量数据。特别是,由于通过Web或电子商务上进行的商业活动日益方便和流行,收集的数据量继续迅速膨胀。今天,大部分较大的连锁店都有自己的网站,顾客可以方便地联机购买商品。如 Amazon. com(htp:∥/ww. amazon. com),只有联机商店而没有实体(即物理的)商场。零售数据为数据挖掘提供了丰富的资源。零售数据挖掘可以帮助识别顾客购买行为,发现顾客购物模式和趋势,改进服务质量取得更好的顾客保持度和满意度,提高货品消费比,设计更好的货品运输与分销策略,降低企业成本。
  3.3科学与工程领域的应用
  计算机科学中的数据挖掘可以用来帮助监测系统状态、提高系统性能、隔离软件错误、监测软件剽窃、分析计算机系统缺陷、发现网络入侵和识别系统故障。软件和系统工程的数据挖掘可以在静态或动态(基于流)数据上进行,取决于系统是否为之后的分析提前卸载跟踪,或者是否必须实时反应,处理联机数据。由于大量信息数据注入我们的日常生活[3]。这种通信在万维网和和各种社区网上以多种形式存在,包括新闻、博客、文章、网页、在线讨论、产品评价、叽喳(twitters)、消息、广告和通信。它可以分析用户或读者关于产品、讲演和文章的反馈,以推断社团的一般观点和意见。这种分析可以用来预测趋势、改进工作、帮助决策。因此社会科学和社会研究数据挖掘已经日趋流行。
  3.4入侵检测和预防领域的应用
  计算机系统和数据安全一直处于危险中。互联网的大规模增长,各种入侵和攻击网络工具和手段的出现,使得入侵检测和预防成为网络系统的关键组成部分。入侵可以定义为威胁网络资源(如用户账号、文件系统、系统内核等)的完整性、机密性或可用性的行为。入侵检测系统和入侵预防系统都监测网络流量和系统运行,以发现恶意活动。数据挖掘技术的应用,可以开发强大的入侵检测和预防系统[4]。
  结语
  当前数据挖掘应用主要集中在电信、零售、农业、网络日志、银行、电力、生物、天体、化工、医药等方面。看似广泛,实际应用还远没有普及。数据挖掘会成为未来10年内重要的技术之一。而数据挖掘,也已经开始成为一门独立的专业学科。具体应用方向主要有:对知识发现方法的研究进一步发展,如对Bayes和Boosting方法的研究和提高;商业工具软件不断产生和完善,注重建立解决问题的整体系统,例如Weka等软件。数据挖掘的发展应是挖掘工具在先进理论指导下的改进,而就国内情况而言,还有至少20年的发展空间。
  参考文献
  [1]  Micheling Kamber/Jian Pei.数据挖掘概念与技术[M].机械工业出版社.2012.8.
  [2]  韩秋明、李微、李华锋.数据挖掘技术应用实例[M].机械工业出版社.2009.
  [3]  邱恩海.计算机数据挖掘技术的开发及其应用研究[J].科技风.2019(17):100.
  [4]  刘芬.基于计算机数据挖掘技术的开发及应用分析[J].数字技术与应用.2018(05):220-222.
  作者简介:李沂;女;(1987.5.12—):研究生;研究方向:计算机科学与技术。
其他文献
摘 要:MATLAB作为目前较为流行的数学软件之一,对数据信号分析、复杂方程的计算有相当大的优势。对此,文章从实例出发,论述了MATLAB软件在数据处理中的重要作用,进而提高对MATLAB软件在数据处理中的认识。  关键词:数学物理方法;MATLAB;实例  MATLAB是高性能的数值计算应用软件,具有优秀的数值计算功能和强大的数据可视化能力[1]。在信号处理中应用 MATLAB 进行计算仿真,一
期刊
摘 要:农业生产长期采用传统的施肥方式,存在肥料利用率低、环境污染以及结构不合理等问题,通过变量施肥自动控制技术可以解决上述问题。本文围绕变量施肥自动控制技术应用现状以及发展趋势展开讨论,为该技术在农业生产中的应用提供参考依据。  关键词:精准农业;变量施肥;决策系统;变量控制  引言:  农业生产者采用传统的施肥方式,会在耕种土地出现局部平均现象。但是,土壤肥力的差异性,平均施肥会造成资源的浪费
期刊
摘 要:以Atmega64单片机读取DS18B20并在数码管上显示温度为例,介绍了如何使把Proteus仿真应用在AVR单片机项目开发中,达到简化步骤快速实现AVR单片机开发项目的目的。  关键词:Proteus;AVR单片机;仿真  1 引言  随着半导体技术的发展,单片机其实已经渗透到我们工作和生活的方方面面,因此越来越多的技术人员加入到基于单片机系统的项目开发行列中来。然而传统的单片机系统开
期刊
1.引言  手持终端及管理软件在港口的生产中已被广泛使用,其具有数据实时采集,信息反馈及时等优点,大大的提高了码头的装卸生产效率,成为现代物流生产中不可或缺的重要技术。凭借多年的码头杂货生产系统的开发和实施经验,结合公司的生产实际,我们开发了手持终端管理系统。为了进一步提升公司的生产效率,实现港口生产的手持化,提出开发陆运生产手持管理系统。  2.总体设计  2.1系统运行环境  系统网络环境的搭
期刊
摘 要:大课间操本身具有灵活多样、丰富多彩的特点,其在小学当中的普及应用获得了广大师生的认同和喜爱,对小学体育教育的革新以及素质教育的发展具有很大的推动作用,能够使体育教育中的健康教育以及素质教育目标得到有效的落实,因此,本文针对相关内容进行具体论述,意在提升大课间操在小学体育教育和素质教育中的作用。  关键词:大课间操;小学体育;素质教育;窗口  体育教育是小学教育的主要内容之一,在素质教育全面
期刊
摘 要:学前教育对幼儿来说是具有非常大的作用,在幼儿接受教育之前可以帮助幼儿了解到一些以后的路,这样的说法可能幼儿在现在这个阶段不是很清楚,只有一个模糊的了解。因此,教师在让幼儿接受学前教育时要有耐心的为幼儿分析及讲解所要讲解的内容,让幼儿更加清楚的理解。众所周知,好的学习环境可以为孩子们提供好的教育,同样的道理,学习环境不是很好的也可以为幼儿提供良好的教育,只不过是看教师的教育方式及教学手法。学
期刊
摘 要:当前我国社会经济发生了巨大变化,学校学生的思想状况随之也发生了变化。以往传统封闭、僵化、灌输式的单向传递的教育方式已与于时代发展脱轨。新时期的思想政治教育需要我们积极探索符合教育对象身心特点和发展需要的方法途径,使思想政治教育更有说服力和影响力。因此,创设优良的思想政治教育心理情境,可以提高思想政治教育的有效性,从而更好的引导学生健康成长。  关键词:思想政治教育;心理情境;创设  一、概
期刊
摘 要:城市化进程加快,公路建设也相应迅速发展,交通噪声问题也随之而来,对人们生活的影响也愈发显著。人们对于生活质量的要求不断提高和对生态文明建设的重视加剧,公路交通噪声对环境的影响也越来越被引以重视。研究和防治城市交通噪声对于构建和谐社会、正确处理好人与自然的关系有重大现实意义。本文针对公路交通噪声的特点提出了一些降噪措施。  关键词:交通降噪;防治措施;声屏障;隔声窗  一、引言  交通噪声控
期刊
摘 要:当前我国工业和民用建筑工程技术管理质量控制仍然存在一定的问题,影响工程建设的最终水平。本文主要针对工业和民用建筑项目的常见问题进行探析,指出具体的解决措施,希望能够提升建筑工程的建设质量。  关键词:工用与民用建筑;工程技术;质量控制  1前言  科学技术的不断发展使得建筑工程项目的建设水平也获得了迅猛的提升,随着城市化进程的不断加快以及城市人口的急剧增多,工业与民用建筑工程项目建设规模以
期刊
摘 要:软土地基处理工程公路路桥施工工程的基础,不仅有效保障了公路路桥施工的稳固性,更是对整个公路路桥施工质量的有效保障。但现阶段公路路桥施工过程中,常会受到自然因素以及外界因素的干扰,一定程度上降低了工程的水平和质量。为了进一步解决这一问题,本文对软土地基工程的特点和重要性进行了深入分析和探讨,并对其未来的发展做出了针对性的策略分析,旨在为其提供更加科学的理论研究依据。  关键词:公路路桥施工;
期刊