WEB日志和子空间聚类挖掘算法研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:sailordong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数据挖掘是指从数据中寻找正确的、有趣的、潜在有用的并最终可以理解的模式。随着信息技术在各个领域的普及,在各种应用中每天都有海量的数据被产生和收集,特别是在WEB应用、自然科学、电子商务等生产生活相关的应用领域中产生了大量复杂的数据集,如何帮助用户快速有效地从这些数据集中获取知识是一个迫切需要解决的问题。因此,根据实际应用的需要和不同领域数据的特点,构造有效的海量和高维数据挖掘算法有着非常重要的理论和实际意义。在基于WEB日志的查询词翻译方面,在分析用户和搜索引擎进行交互生成的WEB日志的特点的基础上,利用WEB日志作为查询词翻译的语料库。基于WEB日志的查询词翻译挖掘的框架MTQC充分利用双语言URL的对应关系以及URL和查询词的关联关系,分两步完成挖掘:首先识别双语言的URL对,然后匹配查询词翻译对。挖掘算法MTQC-1和MTQC-2建立在这个框架之上,算法具有一些优良的性质:能够找到一些字典中没有出现的词的翻译;能够提取与目标语言的翻译语义相关的查询词,有助于跨语言信息检索;不需要下载网页;直接从WEB日志中找出查询词的翻译,不需要分词和识别短语边界,减少了识别错误导致翻译错误的风险,简化了翻译的过程;能够及时地反映最新、最流行的查询词,避免多义词的选择。在大规模、真实的WEB日志上进行实验,结果表明与流行的查询词翻译方法相比,MTQC-1和MTQC-2在翻译字典中不存在的查询词和常见的查询词方面具有优越性。在基于样式相似性的最大子空间聚类方面,传统子空间聚类算法不能挖掘基于样式相似性的聚类,且已有的基于样式相似性的聚类算法多存在不足之处。基于样式相似性的最大子空间聚类算法EMaPle是一种新的挖掘同时满足一致性约束、大小约束和符号约束的算法。它结合基因表达数据的特点,选择仅在规模较小的属性空间上计算MDSc,采用全局修剪规则修剪生成的MDSc,在对修剪后的MDSc产生的前缀树上进行深度优先遍历的同时,运用局部的修剪规则对属性和子树进行修剪。在真实和人造数据集上进行实验,结果表明EMaPle的性能大大优于经典算法MaPle。在子空间Skyline聚类方面,强调在高维空间的任意子空间上更好地组织Skyline查询的结果,增加结果集的可控性,提高用户的决策效率。在分析高维数据空间的子空间Skyline查询存在的困难的基础上,设计一种新颖而紧凑的结构—子空间Skyline簇,通过在Skyline查询中引入聚类算法,巧妙地结合子空间Skyline查询的优点和聚类技术各自的优点。在一般的Skyline查询算法中有几点要求,即渐进性、正确性、高效性、公正性、用户友好性和可扩展性。基于排序的子空间Skyline聚类算法SSSCM和基于阈值的子空间Skyline聚类算法TSSCM利用最近邻居点以及排序对Skyline查询的作用,并且受到top-k查询算法的启发,满足Skyline查询的这几点要求。在两个真实数据集和两个模拟数据集上进行实验,结果表明这两种算法能够高效地返回结果,TSSCM算法的性能更优。
其他文献
随着社会信息化和网络通信技术的迅速发展,信息已经成为人类社会重要的资源和财富。然而,由于信息的存储、传送和处理等往往都是在开放的通信网络上进行,容易遭受窃听、截取
目的:比较2μm激光与双极电刀用于经尿道膀胱肿瘤切除术(TURBT)治疗非肌层浸润性膀胱癌(NMIBC)的安全性及有效性。方法回顾性分析2009年3月至2013年5月接受 TURBT治疗的 NMIBC患者
党建工作决定着业务工作的方向,是开展好业务工作的可靠保证;业务工作所取得的实际成果是对党建工作取得成效的最好检验。因此,实现党建工作与业务工作的深度融合是非常有必要的
转化医学又称转化研究,是指“从实验室到病床”和“从病床到实验室”的双向转化研究,其概念由时任美国国立卫生院院长的Elias Zerhouni在2003年正式提出[1],其内涵包括快速有效地
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
全国地铁电力安全事故频出的背景下,分析原因,总结风险。着重介绍无锡地铁电力调度员安全管理现状,指出在电力调度工作中安全关键环节,并介绍在关键环节上的具体要求措施。同
背景现代科学技术的发展越来越体现出多门学科的交叉和渗透。集医学,生物力学,机械学,材料学,计算机图形学,数学分析,自动控制等多学科为一体的新型交叉研究领域-医学虚拟现
受到城市化建设的影响,政府对公路施工工作的重视程度逐渐提高,但软土路基施工工作存在一定的难度,需要合理调整设计,本文通过换填技术、注浆技术,两个方面对公路施工中软土
目的:观察沙丁胺醇联合布地奈德悬液雾化吸入治疗喘息性支气管肺炎患儿的临床护理疗效。方法:75例喘息性支气管肺炎患儿随机分为两组,对照组35例,给予抗感染、止咳、化痰等常
按照地方普通本科高校培养应用型人才的要求,针对烹饪专业英语教学中存在的问题,重点探讨了烹饪专业英语教学的现状和特点。现立足教学现状,本文对应用型人才培养模式下的烹饪专