文本蕴涵识别及其在问答系统中的应用

来源 :武汉大学 | 被引量 : 4次 | 上传用户:dreamrain1220
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
文本蕴涵是计算语言学领域最具挑战性的课题之一,也是众多自然语言处理应用的一个重要部分。文本蕴涵作为一种文本推理的通用框架,为整合各种文本的语义表示方法、知识获取方法和推理方法提供了平台,具有广泛的应用前景。本文研究了文本蕴涵的两种识别策略:分类策略和转换策略。分类策略就是该策略将文本蕴涵形式化为一个两类(或三类)的分类问题,而转换策略则是通过考察文本之间能否通过若干转换而变成一致的形式,来判断它们是否具有蕴涵关系。本文的工作针对以上两种策略而进行。根据目前分类策略存在的训练数据不足的问题,我们提出了利用半监督学习方法识别蕴涵关系;根据目前转换策略存在的蕴涵规则无法表示复杂的语义关系的问题,我们提出了基于事件模型的文本蕴涵识别方法。最后,我们在问答系统的各模块中分别应用以上两种识别方法,以改善问答系统的性能。本文的主要研究内容和成果概括如下:第一,由于蕴涵和非蕴涵两个类都比较庞杂,实例间的相似性难以保证,因此分类器性能并不理想,其根本原因是训练数据不足。为了在训练数据不足的情况下,保证较好的学习效果,我们采用Co-training的方法进行半监督学习。为此,我们采用了两种视角,一种是改写者视角,即站在试图创建假设的改写者角度观察数据,这种视角将蕴涵理解为文本片断的改写,并且这种改写可以是词汇、句法或者语义层面的;另一种是评估者视角,即站在评估者如何去评价一个文本-假设对是否存在蕴涵关系的角度观察数据,这种视角将蕴涵理解为词汇重叠或字串相似。通过与有监督的分类器进行比较可以发现,在已标注训练数据为原数据的30%至70%时,基于Co-training的半监督分类器的性能比有监督的分类器的性能有较大的提高。第二,我们利用了事件模型的概念建立了一种文本的深层表示方法。事件模型本质上是一个图,图中的结点为事件,边为事件之间的关系,这种关系可以是蕴涵或非蕴涵的关系,也可以是语篇逻辑关系。基于事件模型的文本表示方法能够表示深层语义,并具有跨语篇、能够进行蕴涵推理的能力,以及鲁棒性的特点。第三,我们提出了一种基于事件模型的文本蕴涵识别方法。该方法通过两方面考察文本与假设之间的蕴涵关系:一是文本中事件之间的蕴涵关系,包括等价的蕴涵关系和非等价的蕴涵关系;二是文本内事件之间的逻辑关系,如因果关系、时序关系等。文本与假设存在蕴涵关系,当且仅当假设中的全部事件蕴含于文本中的相应事件,并且假设中的事件之间的逻辑关系与文本中相应事件之间的逻辑关系一致。为此,我们分别提出了扩充事件模型的算法,这些算法一方面扩充事件,另一方面扩充蕴涵关系和逻辑关系。最后,我们给出了蕴涵程度的评估方法。第四,我们将两个系统应用于问答系统的问题理解、检索和答案抽取模块中,其中,基于半监督分类的文本蕴涵识别方法作为粗粒度的识别方法应用于文档和段落检索,而基于事件模型的文本蕴涵识别方法作为细粒度的方法应用于问题理解和答案抽取模块。实验表明,在加入蕴涵识别方法后,问答系统的精度有了较大提高。
其他文献
角色是游戏的灵魂,角色动画的动作设计则是将一个游戏角色赋予生命的过程。学龄前儿童是游戏的特殊受众群体,游戏对于他们而言是认识生活的渠道,体验社会的方式。随着计算机
目的分析急性ST段抬高型心肌梗死应用盐酸替罗非班辅助经皮冠状动脉介入治疗的临床效果。方法选取2015年12月~2017年12月在本院诊治的124例急性STEMI患者临床资料,按治疗方案
黑龙江省各族人民在长期的劳动生活中创造了风格迥异的少数民族体育文化,民族传统体育产业具有较大的发展空间。以发展少数民族体育旅游业为切入点,科学合理地开发民族体育文
在我国不断推进工业化进程的过程中,装备制造业得到了巨大的发展。但我国的装备制造业“大而不强”,独立完成核心技术能力不足、核心设备需要进口,自主创新能力较弱,结构性问题突出。而知识密集型服务业是信息科技时代知识要素高度集成发展所形成的产业,能够通过给装备制造业企业提供有效的知识和技术,增强其产品附加值,进而促进装备制造业升级。对于知识密集型服务业如何促进装备制造业升级的问题。本文主要从以下三个方面来
近年来数字内容产业在全球范围内蓬勃发展,并在经济领域扮演日益重要的角色。数字内容产业中,数字电影、三维动漫、三维游戏占有相当大的比重,它们都涉及到一个核心关键技术
阐述了构建和谐的劳动关系是构建和谐社会的基石及当前所面前的问题。说明了法治是构建和谐劳动关系的重要保障。
人脸识别在计算机视觉和生物识别系统中具有非常重要的作用。尽管现有的人脸识别系统已经比较成熟,但还存在着一些会对系统的可靠性构成威胁的因素。例如,姿态、光照、面部表
第一部电影音乐的诞生一九四五年,日本法西斯宣布无条件投降后,我随“鲁艺”文工一团到达大连。那时,我还是一名歌唱演员,在《黄河大合唱》里独唱《黄河怨》。一九四六年,蒋