大数据关联规则挖掘研究

来源 :兰州交通大学 | 被引量 : 3次 | 上传用户:syw2565
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近来的这些年里,我们的社会正在发生着翻天覆地变换,科技的发展变幻早已远远超出了我们的想象,尤其是在计算机方面人们对于人工智能的探索又向前迈出了一大步,各种新颖的技术、算法和概念不断的在改变着我们的生活,数据正在以前所未有的速度增长和积累。大数据时代的到来意味着信息系统的进化真正进入诺兰模型的更加完善和成熟的阶段。大数据被看作是最近数十年来最具有革命性和重要意义的里程碑。伴随着大数据时代的来临,如何从复杂的数据环境中找到我们事先未知的关联规则是研究人员共同的目标。由于数据随着时间而不断的产生,数据库中存储的数据成指数倍增长,数据间相互的关联关系也变得复杂起来,从而把那些看起来没有任何联系的数据,通过关联规则挖掘算法而得到其中某些关系的可能性也就越大。通过翻阅大量参考文献和书籍,学习并评判过去的关联规则挖掘算法,将论文整体思想分为主观和客观两个方面进行对大数据关联规则挖掘进行研究,具体内容如下:(1)客观方面主要是通过学习现有的算法生成关联规则中,冗余关联规则的数目要远远多余真正有价值的关联规则数目,冗余规则不仅会妨碍研究人员分析和理解,而且对整体关联规则的利用率也大大降低。针对关联规则冗余的问题,本文提出了一种基于一阶谓词公式去除商务数据冗余关联规则的方法,利用一阶谓词公式来表示关联规则,通过等价公式进行转换,并利用算法和矩阵等价将谓词公式转换为邻接矩阵,然后利用冗余规则算法进行删除。实验的原始数据为UCI数据集,并利用WEKA里的关联规则算法的到关联规则。最后利用MATLAB和Java实现冗余规则的去除。(2)主观方面是从用户兴趣度和领域知识这两个方向来进行研究,针对用户兴趣度,本文将做以下研究:首先通过客观的冗余关联规则算法得到处理后无冗余的关联规则,并对关联规则进行分类,通过把用户所感兴趣的属性或规则作为导向目标,添加模板思想作为用户表达含义的载体,并对模板分类。对主观兴趣度的度量方式优化处理,从而达到完善兴趣度的计算方法。针对领域知识,本文将做以下研究:在数据挖掘过程中利用现已知的领域知识作为冗余规则的评判标准,在生成关联规则的过程中删除冗余规则,并将生成结果的规则作为领域知识加入到领域知识库中,用以引导下次的挖掘过程,使该算法随着运行的次数增多,效率将会越来越高。
其他文献
美国■吸哪苏大学(Ursinus College)中国宋史研究专家休·R·克拉克(Hugh R·Clark)博士新著《社会、贸易与网络:公元3至13世纪的闽南》,由牛津大学出版社于1991
利用黔东南地区16个地面气象观测站1961-2010年逐月地面0-20cm浅层地温和气温实测资料,分别统计四季浅层地气温差的时间序列,采用正交函数分解(EOF)、经验模态分解(EMD)、Man
氯乙酸是一种重要的有机化工原料,广泛地应用于农药、羧甲基纤维素、医药、染料等领域。一直以来,氯乙酸结晶采用的都是间歇结晶工艺,根据经验控制结晶温度。结晶工艺存在结
泛函方程的稳定性问题源于Ulam提出的群同态稳定性的问题:给定一个群(G1,*)和一个度量为d(.,·)的度量群(G2,*,d),给定ε>0,是否存在一个δ>0,使得对所有的x,y∈G1,如果f:G1→G
中国是一个产锑大国,因此锑污染的问题日益严重,锑污染的治理越来越受到各界的广泛关注。常规的水处理方法对于治理高浓度的含锑废水效果较好,能够快速降低锑污染的浓度。但
肿瘤尤其是恶性肿瘤是威胁人类生命安全的疾病之一,对肿瘤的诊治一直是国内外研究的重点。在众多诊治肿瘤的方法中,利用超声特别是聚焦超声而发展起来的超声抗肿瘤方法日益受到
本文以二正丁胺为模板剂,通过改变硅源、铝源种类合成了硅铝磷酸盐SAPO-31分子筛,采用等体积浸渍法制备了 Pd/SAPO-31分子筛双功能催化剂,并对其进行了 XRD、SEM、TEM、XRF、
近年来,我国经济发展迅速,随着资金投入量的加大,财政压力逐渐彰显,同时,伴随一带一路等战略的实施,需要更多资金投入基建,在此形势下,我国借鉴国外的PPP模式参与基建。PPP融资模式的引入为我国经济建设做出重大贡献,但随着PPP项目规模的不断加大,越来越多的问题逐渐暴露出来,对此,各界学者纷纷提出自己的看法,然而大多数学者对PPP融资问题的研究仅停留在理论层面,少有结合实际情况从定量的角度进行分析并
高考体育统考是对体育生身体素质的全面考验,本文在分析高考体育性质和学生特点的基础上,论述了加强高考体育训练的对策,主张科学制订训练计划,明确目标,循序渐进;加强心理训
21世纪以来,随着我国市场经济的发展与相关制度完善,越来越多的企业在经营过程中采用股权激励的方式,以留住或激励管理层及核心员工,提升企业绩效,使得企业更好地发展。本文