基于深度学习的指定情感回复生成研究

来源 :燕山大学 | 被引量 : 0次 | 上传用户:wyn6098
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着大数据和神经网络的发展,开放域对话系统的研究逐渐受到人们的重视。然而目前大多数对话生成方法主要关注回复内容的质量,忽略了情感对于回复生成的影响,但情感表达能使回复更加自然流畅。因此,在自然语言对话系统中考虑情感因素十分重要。此外,传统基于RNN网络的Seq2Seq模型生成回复时,会出现情感表达不明确、回复内容单一且相关性低等问题。该文针对以上问题,进行了以下研究:首先,针对现有对话生成模型在对上下文编码的过程中忽略了对全局特征的建模问题,本文提出了一个基于Transformer-L神经网络的情感对话生成方法。该方法使用Transformer作为编码器对输入序列的全局语义特征进行提取。所采用的Transformer由多头注意力机制构建,能够从多个子空间提取语义特征,再通过对来自于不同子空间特征的加权融合,从而得到更加全面的上下文语义表征。之后,通过在动态注意力机制中嵌入指定情感词,使模型在解码特征学习时关注到情感信息,从而生成情感回复。在实验阶段,通过对所提出的模型与基线模型的对比实验、以及自身的消融实验证明,Transformer编码器和情感词嵌入能有效提高指定情感回复生成的情感准确度和内容相关性。其次,针对现有对话生成模型易生成通用回复的问题,本文提出基于生成对抗网络的情感对话生成方法。其中生成器采用基于GRU的Seq2Seq模型,在解码时嵌入情感词向量,促使模型生成情感回复,并引入随机噪声共同输入判别器。通过生成器预训练策略和强化学习策略,使生成器在与判别器的交替迭代对抗训练中,跳出其目标函数引起的局部最优解问题。通过对模型进行消融对比实验并选择最优模型参数,最终实验证明情感词嵌入和对抗训练能减少通用回复的生成概率,提高指定情感回复生成的情感准确度。
其他文献
在标准模型中,中微子是严格无质量的。但大量的中微子振荡实验表明中微子的质量并不为零,且轻子部分存在味混合现象,这说明标准模型是不完备的。跷跷板机制因能解释中微子质量的微小而获得了人们的广泛认可。同时,跷跷板机制还为解释宇宙中重子不对称现象提供了一个新的途经―轻子生成机制。在实验确定最小的中微子混合角θ13之前,人们普遍认为θ13的值是极小的甚至可能为零,由此提出了三双最大(TBM)混合和-交换对称
学位
近年来,国家发布一系列政策文件大力支持交旅融合深度发展,各地相继开展研究和实践探索,广西北部湾作为我国南部沿海发展重要区域,旅游资源和交通建设都具有优势条件,对于交旅融合服务区而言,市场需求和区域供给情况则是其开发建设和运营的重要依据,本研究从游客需求角度入手,通过对该区域交旅融合发展进行RMP分析,探讨区域交旅融合服务区业态和产品开发方向。
期刊
因果推理作为近几年新兴的研究领域,其目标是找出数据之间的因果关系,去除含有混杂的相关关系。针对当前机器学习算法存在的可解释问题,本文从因果推理的角度出发,提出了基于因果因子的属性偏序结构研究。具体工作如下:首先,本文基于因果推理理论提出了因果因子,用于衡量属性之间因果性的强弱。本文给出因果因子的定义、定理和性质,并以此为基础提出因果二分法将数值型数据转化为二值形式背景,便于进一步的数据分析。实验分
学位
音乐教育不仅能够使学生掌握音乐知识,还能培养学生良好的品性。西方古典音乐与中国传统音乐是高校音乐教学的重点内容,促进二者的有效融合不仅能够丰富学生的知识体系,还能提升学生的综合素养。阐述西方古典音乐与中国传统音乐的关系,分析在高校音乐教育中融合西方古典音乐与中国传统音乐的必要性,并提出相应的融合策略,对高校音乐教育的发展具有重要意义。
期刊
三维人体姿态估计是指从图像或视频中定位人体关节点三维坐标。针对因遮挡、姿态复杂造成的预测不准确问题,本文探索利用人体拓扑结构和时间信息提高三维人体姿态估计的效果,主要工作概括如下:针对因遮挡、模糊而导致三维姿态估计不准确的问题,提出利用人体拓扑图的先验信息,构建了一个结合图卷积与注意力模块的网络,使用注意力模块提取全局姿态信息,再通过图卷积捕捉相邻关节点之间的空间约束信息,加强相邻关节点之间的影响
学位
睡眠几乎占了人类寿命的三分之一,睡眠质量与人的身心表现直接相关。随着人们生活压力的增大,多种心理障碍疾病和神经系统障碍疾病会影响正常睡眠模式,现代社会的睡眠障碍正在迅速增加。睡眠分期是对睡眠障碍及相关疾病实现正确诊断和治疗的关键部分。论文基于单通道脑电信号,分别应用传统机器学习方法和深度学习方法,训练了两个自动睡眠分期模型,利用Sleep-EDFx睡眠数据库对模型性能进行了分析。论文主要内容如下:
学位
图神经网络研究是当前深度学习领域研究的热点之一。图神经网络的分类鲁棒性一直是图神经网络研究的前沿课题,其对于提高图神经网络模型的分类性能和可扩展性有着重要意义。针对图神经网络的分类鲁棒性的问题,本文从因果推断的角度出发,提出基于因果采样的图神经网络研究。具体工作如下:首先,提出一种在图数据上的因果采样方式。建立图数据中节点、标签、扰动之间的因果模型,通过后门准则切断此因果模型中的后门路径,得到该模
学位
本文在三轴转子模型的基础上,引入偶偶核芯与单粒子间的四极-四极相互作用而构建了适合描述振动到三轴形变过渡区奇核低激发性质的新粒子转子模型,导出了该模型中相关物理量的矩阵元,并据此编制了相应计算程序.作为初步应用,本文利用新粒子转子模型计算了振动到三轴形变过渡区的135Ba和131Xe的低激发能级,约化E2跃迁几率和部分低激发态电四极矩,并与相应的实验结果,原粒子转子模型,临界点对称性E(5/4)模
学位
基于粤港澳大湾区545份有效问卷,从游客感知价值视角,探索游客参与价值共创的结构维度,构建游客价值共创“动机—行为—结果”形成机制,得出邮轮游客价值共创提升路径:邮轮旅游企业要准确把握游客需求,激发游客价值共创动机,促进游客参与价值共创行为,提升游客感知价值,实现供需双方合作共赢,促进邮轮旅游产业发展。
期刊
水稻作为一种重要的粮食作物,在我国种植面积十分广泛,对保障国家粮食安全意义重大。随着航空植保机械的发展,对水稻精准施药的要求越来越高。但当前我国水稻施药关键装备仍然落后,“事前”无法结合田间信息按需自适应施药,造成农药浪费大,利用率低以及环境污染等问题;“事后”药液沉积参数检测手段粗放、低效,无法为雾滴沉积分布规律的有效评估提供及时准确的数据支撑。由于播种不均匀、漏播、过量施肥等人为因素,或水灾、
学位