中文微博实体链接方法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:nancyqi117
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
网络资源的不断膨胀,信息的不断增多使得人们获取有价值的信息变得越来越困难。而微博的发展和流行,使得人们更加无法从短文本中获取更多感兴趣的内容。课题组为解决这一问题,开发了知识拓展与推荐平台,为用户感兴趣的信息提供更多的拓展信息。而待拓展知识条目的歧义性成为系统性能的瓶颈。实体链接技术是解决该问题的重要方法,它让程序自动确定上下文中出现的某个实体指称应该指向的真实世界中的哪个实体,从而实现消歧。针对中文微博这一短文本领域的实体链接任务,主要进行了以下几个方面的工作:为获取充足的微博语料,本课题首先实现了网页微博爬虫程序,相比于API的获取方式,大大提高了获取效率,同时获取了大量的微博语料,并进行了相应预处理工作。候选实体的获取是实体链接的关键,针对任一待消歧实体,提出了多种不同方式获取的候选实体,分别赋予了不同的权重以去除噪声提高消歧的准确性。候选知识库信息的获取则主要来自维基百科和百度百科,对于百科中不存在的词汇,则调用一个元搜索对网络上的信息进行整合,完成信息的获取。而针对微博语料的特征稀疏问题,首先利用用户简介信息、标签及近期微博进行拓展;然后提取微博中的关键词获取Google、百度、Bing等搜索引擎的结果进行拓展。实现了基于多渠道候选实体的实体链接算法和基于领域词库的实体链接算法。通过各种方法的对比,算法在NLP&CC2013评测公开数据集上能够给出较为理想的准确值。本课题最后基于新浪微博开放平台搭建了知识拓展与推荐的应用系统。本课题算法处理的结果在系统运行的结果显示,可以达到预期的效果。
其他文献
企业要取得长远的发展,就必须构建良性企业文化作为内在支撑,这不论在学界还是业界均为一大共识。泉州家族企业是一个具有鲜明特色企业群体,过去30年,从维持生存的手工作坊、草根
应用有限元软件对某超细粒尾矿坝进行了渗流数值模拟计算,同时分别采用极限平衡法中的瑞典条分法、Janbu法、Morgenstern—普赖斯法和简化Bishop法4种方法,利用这些耦合渗流
城市综合体是商业地产的一种高级形态,它综合着多种城市功能,功能、流线和分区更加复杂化,目的就是以它独特的商业价值,让投资者和开发商获得最大的回报。随着房地产业的快速发展
高职高专护理专业学生人文素质培养是高职护理教育中重要的任务之一,对提高学生综合素质起着重要的作用。从护理专业学生人文素质培养的重要性入手,对人文素质培养中存在的问
加拿大麦克玛斯特大学家庭医学系的J.Emili等人对加拿大、印度、乌干达等国即将毕业的医学生肺结核病知识与临床技能进行了调查研究 ,现根据他们发表在英国医学教育杂志 2 0
针对和成矿业井下原矿含泥量和含水量较大,且矿泥中存在绿泥石、高岭土等黏土类矿物,造成供矿系统粘堵严重,系统台时量仅为设计水平一半的问题,对原矿进行了洗矿工艺研究。通
针对雅安大相岭以南为亚热带湿润偏干季风气候区(汉源、石棉),以北为亚热带湿润季风气候区的气候特点,将雅安分为南部和北部两个亚区,从气候、土壤、灌溉、地形条件入手选择
特高压交流输电和超高压交流输电是电力输送的两种重要方式。根据交流输电系统等值数学模型构建出满足同等输电能力的特高压和超高压交流输电方案,在此基础上计算出不同情境
口译是指用口头表达方式将原语信息转换为译语信息的一种即席翻译活动。译者主要以语言为工具,在不同的语言交流者之间起媒介作用,帮助双方克服语言障碍进行交流。和笔译相比,口