基于Spark的精准关联规则挖掘算法实现

来源 :信息技术 | 被引量 : 0次 | 上传用户:hanyeliu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为在大数据环境中精确地进行关联规则挖掘,基于分布式框架Spark,改进关联规则挖掘算法Apriori,解决使用该算法处理大规模数据时遇到的单机内存资源限制和性能缺陷,同时保证结果准确度。利用开源数据集和海量轨迹数据集评估算法的有效性,实验结果表明:与传统方法相比,改进后的Apriori算法进行规则挖掘能够得到相同准确度的结果,并且通过增加处理节点的数量灵活扩展待挖掘数据规模,从而使关联规则挖掘不再受数据规模限制。
其他文献
<正>杨凝式为人作书姿态杨凝式(873—954),字景度,华阴人,唐相杨涉之子。自称癸巳人、杨虚白、希维居士、关西老农等;因其在后汉时曾任职太子少师,世人又称其曰"杨少师";后因
2007年高考。奋斗、煎熬、期待、欢乐的时刻。难忘与同学们最后一次击掌鼓劲,从容走上考场;难忘雨中,妈妈撑着雨伞,在校门外期待的目光;难忘深夜,一个人手捧着准考证,一次又
以6-RSS并联机构为研究对象,运用D-H方法建立了各支链构件的坐标系。推导了支链的运动学反解的解析方程,并给出了各个构件的速度、加速度与动平台的速度、加速度的映射关系。
介绍了近年来纳米二氧化硅改性聚丙烯复合材料的研究进展,综述了纳米二氧化硅粒子表面处理和添加增容剂改性的主要方法,阐述了纳米粒子与聚合物相容性的提高对复合材料各项性
安徽省大鲵资源初步调查报告王渊(安徽省水产局,合肥230001)大鲵(Andriasdavidianus)属国家二级保护水生野生动物,俗称娃娃鱼、鲵鱼,属两栖纲、有尾目、隐鳃鲵科,是世界上一种珍稀的两栖动物。它不仅在物种分
短文改错试题是高考英语试卷的基本题型,虽然出题方式经历了几次变革,由单句改错变为逐行改错,到现在的篇章改错,但改错题型的考察方向仍然包括了英语语法、阅读和写作能力的
现阶段,人们的安全意识越来越强,海上救助工作作为海上安全保证工作中重要的构成部分,是全社会共同关注的热点问题。海上救助辅助决策基础平台对于海上救助工作具有非常大的
根据某学院教务部门提供的教学评价数据,利用MATLAB统计工具箱的多元统计回归命令和逐步回归命令,建立了学生对教师总体评价与各评价项目之间的四个回归模型.这些模型简单有
十八大以来,党中央把"精准扶贫、精准脱贫"上升为国家战略,我国扶贫效果取得显著成绩。目前民族地区扶贫模式仍然是政府主导,"三位一体"大扶贫模式并未真正形成。企业参与民