基于检索和机器阅读理解的自动问答方法

来源 :南京大学 | 被引量 : 0次 | 上传用户:hbc235wjm
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
获取信息是日常生活中必不可少的部分,然而互联网上的信息特别多,想要获取自己需要的信息费时费力,为解决这一难题,自动问答任务随之提出,其目的是从互联网上找到人们需要的答案。自动问答作为自然语言处理的一个重要的部分,近年来得到了巨大的发展,得益于许多问答数据集的提出,越来越多的自动问答系统达到了较好的效果。现有方法往往假定问题对应的文本已经存在,然而这在现实中很难满足,本文提出的自动问答方法不受这一限制。由于机器阅读理解任务较为复杂,基于特征的方法通过人工构建特征较为困难,基于神经网络的方法模型简单的效果不理想,效果比较好的模型参数比较多,特征与神经网络混合的方法需要将两方面有较好的结合。本文提出的结合双向累加注意力机制和循环答案指针网络的机器阅读理解模型,模型适中,易于训练,参数较少,训练只需万级别语料即可收敛,而且不需要手工构建任务所需特征。本文在此背景下提出了一个基于检索和机器阅读理解的自动问答方法,本文的主要工作和贡献如下:1.本文结合双向累加注意力机制和循环答案指针网络提出了一个机器阅读理解流水线(pipeline),该流水线能够实现对输入的自然语言问题和包含答案的文本进行阅读理解得到答案,主要包括词嵌入层,预训练表示层,上下文表示层,双向注意力层,塑形层和答案指针层。2.本文根据传统的注意力机制,设计了一种适合阅读理解的双向累加注意力机制,能够有效获得文章和问题的相似度,再依据相似度获得文章到问题的注意力和问题到文章的注意力,有利于阅读理解模型定位答案。本文将指针网络拓展为循环答案指针网络,并应用到阅读理解模型中,使用一个软性的指针输出答案在原文的开始结束位置。3.本文实现了一种基于二元语言模型的TF-IDF的文本检索和字符级别的n元语言模型匹配的重排序方法。结合文本检索,重排序和机器阅读理解模型,实现了一个基于检索和机器阅读理解的自动问答系统。该系统能够实现输入自然语言的问句,返回问题的答案。
其他文献
人类室内活动的密集化和室内上网需求的日益攀升,早已推动了室内无线网络的发展。得益于室内无线网络成熟部署的天然优势,目前基于Wi Fi的室内定位技术具有重要的研究价值。
随着国家“海洋强国”和“一带一路”战略的发展,我国迎来了海洋结构物建设的高潮,特别是在跨海桥梁方面,成果更为显著。与内陆桥梁不同,跨海桥梁所处的海洋环境比较复杂,其下部桩基础往往承受较大的波浪荷载,影响桥梁结构的稳定性。周期性的波浪荷载一方面会直接对桩基础造成损伤,直接造成结构性破坏;另一方面,波浪会对桩基周围的海床响应产生影响,间接危害海洋结构安全。在波浪的传播过程中,会在海床表面施加周期性的波
主观幸福感的研究发展到今天已经成为一个多学科的研究方向,对于主观幸福感的探讨也是多种多样,但国内主要的研究是集中于中东部地区,对于西北地区则缺少相关研究。对于研究
纳米复合金属氧化物由于其独特的结构特性对其性能有较大的影响,本文制备不同摩尔比例的镁铝复合金属氧化物;以葎草为模板成功地制得拥有葎草茎秆状结构的锌铝复合金属氧化物。运用一些表征手段,包括有XRD,SEM,TEM,FTIR,Zeta电位等对样品的形貌结构和物化性能进行分析,并且对样品进行吸附甲基蓝和抑菌实验研究。以不同摩尔比例的硝酸镁,硝酸铝和尿素作为原材料,通过水热法,制备不同摩尔比例的镁铝复合金
面对高温热力耦合、测量空间有限等复杂的测量环境,传统的基于单点变形测量的力学参数识别技术难以实现多种类力学参数的同时测量。近年来,基于全场变形测量的力学参数反演方
分类作为数据挖掘领域中的核心研究内容,在现实生活中有着非常广泛的应用,例如根据病人的临床病症属性判断病人患了什么病。常见的构造分类器的方法有很多,如贝叶斯网络、支
符号对码是一类能够有效处理有噪信道数据读取过程中出现对错误的编码方法.符号对码的极小对距离是用于衡量符号对码纠错能力的一个重要参数指标.在符号对码的长度和维数一定
太赫兹(Terahertz band,THz,0.1-10THz)通信被视为实现太比特每秒(Tbps)的无线数据传输速度的关键技术之一。但是,太赫兹频段的通信距离主要受两方面因素的限制,即太赫兹频段
本征图像分解是计算机视觉领域中一个颇具挑战性的任务,其目的是从观测图像中恢复出一系列能够描述图像本质的特征部分。由于每种特征部分所表示的不同物理意义有益于许多图
随着信息技术的飞速发展和人工智能时代的到来,现代社会对电子信息存储产品的要求也越来越高。有机场效应晶体管结构的非易失性存储器(OFET Memory)作为半导体电子器件的重要基