基于卷积神经网络和注意力机制的文档自动问答模型

来源 :浙江大学 | 被引量 : 0次 | 上传用户:willamshao520
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近几年来,随着社会信息化和互联网产业的快速发展,企业对自动问答技术的需求日益增长。特别是电商系统和社交领域,自动问答系统的重要性已逐步凸现出来。基于文档的自动问答系统具有适用性强、调整迅速的特点,非常适用于智能客服助手和聊天机器人等应用场景。得益于深度学习技术的快速进步和大规模网络知识库的出现,基于文档的自动问答技术已具备一定的理论研究和实现基础。本文所论述的中文文档自动问答技术的实质就是句子的语义匹配,为提高语义匹配的准确性,本文提出了基于深度学习的中文问答匹配方法。本文主要完成了如下工作:1.创新性的提出了一种新的注意力加权方式,可用于对卷积神经网络学习到的语义特征进行加权,突出那些更能代表整个句子的语义特征。2.通过新词发现工作,制作了一份用户自定义词典,用以避免分词算法的歧义现象,并运用该自定义词典和word2vec工具训练了一个较高性能的中文词向量模型。3.实现了注意力机制、长短期记忆网络(LSTM)和卷积神经网络模型(CNN)的混合语义模型,并进行了对比实验。实验结果表明,加入了注意力机制的混合模型可以进一步提升匹配的准确度,在Top-1 accuracy和平均倒数排序(MRR)评测指标上分别取得了 2.2%和2.1%的提升。
其他文献
针对小窗口大扫描角要求的光电成像导引头,在总体设计时按照多学科协同设计与优化(Multidisciplinary Design Optimization,MDO)的设计原则,通过并行的子空间多方案快速概念
本文所考察的主要对象是国立北京大学的教师聘任制度的建设以及具体实践。由于大学作为舶来品,由西方传入中国,到现在也不过一百多年的时间,因此在研究的时间段上,本文选取民
地基与基础工程在修建房屋中起着一定的工程任务。同时,地基与基础工程作为各种建筑重要的组成部分,它的质量的好坏直接影响着整个工程即房屋的质量问题。因此,修建好地基与
以案例法为特征的英美法系,其语言特征的形成有其长期的历史演变过程。拉丁语、法语以及盎格鲁—萨克逊语的共同影响使法律英语成为特别风格的职业语言。虽然现代法律英语有
对绩溪县孔灵行政村在建设社会主义新农村中依托蚕桑丰富资源,发展蚕桑生态旅游的前景进行分析,总结发展桑产业生态旅游存在的问题,并就具体的发展思路、原则、途径、目标和
随着计算机技术在各行各业中不断普及,高校学生使用计算机越来越普遍。计算机软件更新速度快,软硬件配置多样化,网络化程度的不断提高,对机房管理提出了更高的要求。针对目前
如今,随着道路交通事业的发展以及各种物资的流通,物流企业渐渐繁荣。在我国的中小城市,物流服务体系建设发展速度很快,但是各项设施和制度建设还不完善,本文以鹰潭现代物流
随着网络时代的全面进入人们的生活,网络技术的不断的更新、完善,给人们的生活水平、工作效率都得到了极大的提高,其中JAVA编程是计算机高级语言,以其独到的竞争优势,被计算
<正>在2019年7月9日与9月11日,工信部相继发布关于《乘用车企业平均燃料消耗量与新能源汽车积分并行管理办法》修正案(征求意见稿)和《关于修改<乘用车企业平均燃料消耗量与