面向推荐系统的数据稀疏问题研究

来源 :吉林大学 | 被引量 : 0次 | 上传用户:kevingod1981
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
众所周知,互联网近几年发展速度超乎人们的想象,用户在互联网上留下的信息不计其数。怎样从这些超量的互联网信息中挖取出用户感兴趣的内容,并且主动推荐给用户,这是推荐系统所要解决的问题和主要任务。随着用户的日益增多,各种门户网站、电子商务网站以及各大公司的系统为用户提供了更多更好的信息服务。以电子商务网站为例,面对多种多样的网购信息,对于知道自己想要什么的用户来说,可以利用电子商务网站的搜索引擎查询自己想要购买的产品。但是,往往用户的需求具有不确定性和模糊性,因为有些时候他们也描述不清自己想要的东西。此时,如果购物网站能够准确给用户推荐那些用户描述不清的商品信息,便能培养用户对自己网站的依赖感,为自己的网站带来巨额的利润,从而能够在竞争激烈的商业市场站稳脚跟。怎样在海量的信息中找到用户的需求并推荐给客户,是各大互联网商家面临的严峻挑战,成为许多学者和专家的热门研究课题。在这种商业驱动和学术氛围的背景下,基于大数据的推荐系统应用而生。推荐系统能够很好的解决当今互联网中“信息过载”这一棘手问题,深受各大公司和电子商务网站的欢迎。然而推荐系统并不是万能的,面对互联网中越来越多的不同种类的数据与一些越来越复杂的应用场景,推荐系统也面临着诸多待解决的问题。这些问题是一些未被很好解决的理论和应用层面上的难题。推荐系统领域研究的热点主要集中在系统的可扩展性,新用户与新项目的冷启动问题,数据稀疏问题等等[1]。数据稀疏问题成为推荐系统发展的一个瓶颈,该问题的存在严重影响了推荐系统的推荐质量。如何解决数据稀疏问题成为保障推荐系统推荐质量的关键所在。推荐系统数据稀疏性问题的产生是因为其在推荐的过程中,需要依赖用户对项目的评分数据来挖掘用户的爱好信息,从而向用户进行推荐,该数据的依赖量影响着推荐精度。这些依赖的数据越多,推荐出来的结果就越准确。但是现实往往事与愿违,推荐系统的用户往往会因为一些原因没有留下评分数据,造成推荐系统可依赖的数据量稀少。因此,推荐系统很难依据数据来找到相似用户,最终导致推荐系统的准确度不高,使得目标用户不满意。本文致力于研究推荐系统的数据稀疏性问题,在前人研究的基础之上对数据稀疏性问题进行了相关的研究。本文的主要研究工作如下:1、阐述了推荐系统数据稀疏性问题产生的原因,并分析其给推荐系统推荐精度上带来的影响。2、指出了现有阶段解决数据稀疏性问题方法的不足之处。固定填充法没有考虑用户与项目的特征属性,会对推荐准确性带来偏差;矩阵降维法容易丢失有效数据,使得预测出来的评分不准确;Content-based CF没有数据稀疏问题,但是不能够发现用户潜在感兴趣的新项目,推荐系统失去意义。3、通过分析User-based CF和Item-based CF各自的优势提出了一种结合传统CF填充矩阵来解决推荐系统的数据稀疏性问题的思想。该思想不仅缓解了推荐系统的数据稀疏性问题,而且还能够极大改善推荐系统推荐性能以及提高推荐系统推荐质量。4、以Apache Mahout推荐技术框架以及Movie Lens数据集进行实验验证,并和传统协同过滤推荐算法进行分析对比,证实了新提出的组合传统CF填充矩阵思想能够缓解稀疏性问题,极大改善推荐系统的推荐质量。
其他文献
近些年来,随着经济社会的发展和公民权利意识的提高,环境污染、交通事故、医疗纠纷等侵害胎儿的事件层出不穷,加之孕育后代的艰辛和高昂的经济成本,要求法律全面保护胎儿权益
跨越城区及河流的公路及铁路桥梁设计中,悬浇连续箱梁的结构应用广泛,文章以通榆河大桥为工程背景,介绍了钢筋混凝土箱梁悬臂浇筑的施工技术,并阐述了挂篮的设计、组装、行走
真实的世界是实现了的“可能的世界”,为弥补不能亲历其他未实现的“可能的世界”的遗憾,人类通过叙述构建出种种“虚构的世界”。真实的世界与“虚构的世界”之间并没有一道
"身份盗窃"行为的日益普遍造成了巨大的现实危害,现行刑法的制裁体系严重滞后。依赖于"招摇撞骗罪"和"伪造公司、企业、事业单位、人民团体印章罪,伪造、变造身份证罪"的制裁
耕读结合是中国古代原始简单的教育与生产劳动相结合,或多或少地存在于几乎整个中国古代社会,其实践与理论也在不断地完善与提高。产生这种现象的原因,或是知识分子的贫困,或
“十二五”期间我国能源发展进入高速发展期,电网和电源建设投资持续加大。我国电力装机容量稳定增长,平均每年新增1亿千瓦,为国家的经济发展和社会稳定提供了坚强的电力支撑
<正>伟大的马克思主义者、伟大的无产阶级革命家、理论家和战略家毛泽东同志,在长达半个多世纪领导中国革命和建设的伟大实践中,为中华民族的独立自主、繁荣富强做出了不可磨
<正>乡村治理体系是乡村振兴战略的重要内容。当前,乡村已经开始从封闭走向开放,从静态变为动态,乡村发展和乡村治理进入发展新阶段,呈现阶段性新特点。要保持农村长治久安、
<正>近年来,随着园林绿化层次多样化和审美标准不断提高,逐渐要求春季百花齐放,夏季彩叶树种色彩缤纷,秋季果实争奇斗艳。百花花楸以其特有的魅力逐渐进入人们的视野。秋冬季
<正>一、白洋淀是历史上的"华北明珠" 白洋淀是华北地区最大的淡水湖 泊之一,位于北京、天津、石家庄三大城 市的中心地带,地处九河下梢,上有潴 龙河、孝义河、唐河、府河等