基于MapReduce的商品评论热点发现算法研究

来源 :中国科学技术大学学报 | 被引量 : 0次 | 上传用户：maotian1

【摘要】

：

提出一种基于MapReduce框架的商品评论热点发现并行算法——PR-HD算法.PR-HD算法使用爬虫技术提取某电商平台下某热门手机的评论数据生成评论数据集,以TF-IDF算法来计算特征

【作者】

：

苏浩刘其成牟春晓

【机构】

：

烟台大学计算机与控制工程学院

【出处】

：

中国科学技术大学学报

【发表日期】

：

2019年2期

【关键词】

：

评论热点发现 MapReduce Canopy算法 K-means算法

【基金项目】

：

山东省自然科学基金(ZR2016FM42);山东省重点研发计划(2016GGX109004);国家海洋局"十三五"海洋经济创新发展示范重点项目(YHC-ZB-P201701);国家自然科学基金(61702439)资助

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

提出一种基于MapReduce框架的商品评论热点发现并行算法——PR-HD算法.PR-HD算法使用爬虫技术提取某电商平台下某热门手机的评论数据生成评论数据集,以TF-IDF算法来计算特征词的权重,通过特征词添加位置权重的方式来得到特征词的最终权值,建立向量空间模型(VSM)计算不同评论语句的相似度,使用Canopy算法和K-means算法相结合从而实现商品评论的热点发现.这使得产品开发人员可以从中获取更直接有效的建议和反馈.

其他文献

成渝试验区统筹城乡综合配套改革新进展

本文对成渝两地统筹城乡综合配套改革试验进展进行了介绍,对两地改革试验的阶段性成果进行了总结,提出了当前及今后两地在改革中应该重点关注的一些问题。

期刊

成渝试验区城乡统筹综合配套改革进展

地西泮片联合补肾益脑丸治疗失眠症效果观察

目的:观察地西泮片联合补肾益脑丸治疗失眠症的临床效果。方法:选择失眠症60例,随机分为观察组和对照组各30例。对照组采用单纯地西泮片治疗,观察组采用地西泮片联合补肾益脑

期刊

地西泮片补肾益脑丸失眠症

毫米波400W连续波固态功放设计

针对未来深空测控及其他航天器的测控通信需求，提出了一种基于单片微波集成电路（MMIC）的新颖高效2×6路结构的波导功率合成方案。利用三维电磁场软件HFSS建模仿真，并以此为基

期刊

Ka频段连续波固态功放合成器合成效率热设计

话忆当年审计检察室

离开审计工作岗位已十多年,闲暇之时想起昔日往事,尤以曾经的荣誉,秒以慰极失落和空虚的心灵。今特向曾经的各位同仁抖落一下新建县人民检察院驻县审计局检察室的前前后后。1

期刊

检察室新建县审计局

基于学科竞赛的包装工程专业人才核心能力培养模式研究——以《包装结构设计》课程为例

高校-企业的人才供需对接不畅的原因在于毕业生专业核心能力不足。在包装工程专业人才培养方案中融入学科竞赛,可以充分发挥学科竞赛对专业人才核心能力培养的优势,促进学生

期刊

学科竞赛核心能力培养模式

恶性肿瘤伤口评估及管理的研究进展

恶性肿瘤伤口的评估及管理对患者的生活质量有着重要的意义。本文从恶性肿瘤伤口评估及管理两个方面进行综述:评估内容包括患者及照顾者评估、局部伤口评估;评估工具包括多伦

期刊

恶性肿瘤伤口评估管理综述

汽车制造业税负及其影响因素的实证研究——基于上市公司财务数据

以45家汽车制造行业上市公司2010～2011年财务数据为样本,研究发现汽车制造业的流转税税负分别为0.018、0.0075,所得税税负分别为0.1951、0.2079,且所得税税负变化很异常。对税

期刊

汽车制造业流转税税负企业所得税税负影响因素

基于MapReduce的商品评论热点发现算法研究

其他学术论文