面向对话文本的主题分割技术研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:myweiyong168
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据时代,海量的对话内容被录制并保存下来。如何利用这些数据,高效辅助并满足人们的生活生产需求是亟待解决的问题。主题分割(Topic Segmentation)是将一个文档(如新闻节目、演讲报告以及会议等)按照主题的转移或变化划分成若干个主题段落,使每个主题段落内表达的主题连贯一致,而与相邻的主题段落所描述的主题不同。其对于冗长的文本和语音内容内的导航,定位,信息抽取以及摘要等有着重要意义。在本文面向对话文本的主题分割技术研究中,主要包含以下两个方面的研究内容:无监督的主题分割方法研究和有监督的主题分割方法研究。首先,本文提出了一种基于主题模型的主题分割方法。目前无监督的主题分割研究中主流的方法是基于主题模型。本文从引入线索短语到无监督方法的前人工作中得到启发,将线索短语这种明显指示主题分割边界的特征通过一个特定的主题融入到结构化的主题分割模型中。通过对隐含的指示分割边界的变量的采样推理,获得分割结果。在英语会议语料上的实验结果表明,该方法对比其他无监督方法能够获得更好的分割效果。其次,在目前对话文本主题分割取得了出色效果的有监督方法基础上,本文通过分析该方法的在词汇空间的特征表示的稀疏问题,以及特征类型单一的问题,提出了改进特征的基于支持向量机主题分割模型。结果表明该方法能够提升主题分割性能,且定量的验证了提出的三类特征的贡献。最后,本文将基于深度学习的表示学习方法应用到对话文本的主题分割,提出了一种基于长短记忆循环神经网络的主题分割模型,通过多层的长短期记忆循环神经网络分别对句子以及句子序列进行了表示,并通过说话人信息的表示学习,进一步提升在对话文本上的主题分割效果。实验结果证明,基于深度学习的主题分割方法较基于特征工程的传统机器学习方法更加有效。
其他文献
带色纹的郁金香就像是一种酒神式的创造力,让它在整齐的郁金香花丛中独具一格,从而身价百倍    总是跟荷兰联系在一起的郁金香,其实祖籍在土耳其,并且很早就沿着丝绸之路来到中国。是的,野生郁金香发源于中亚一带,土耳其是最早人工栽培的国家。  郁金香在土耳其的富贵身份首先引起了欧洲驻土耳其外交官的注意。那时候,欧洲在崛起,但是奥斯曼帝国也还没有衰落,冲突还没有开始,互相还如花朵般含情脉脉。郁金香,就这样
为了更好的发挥高校体育舞蹈课的美育教学效果,提高大学生对于人和社会的审美趣味,最终实现人格与人性的修养,通过教学实验法、问卷调查法和访谈法,以"戏剧角色-自我认同"的
内部恶性竞争存在于集团内部以及组织个体之间。由于集团内部恶性竞争对中国经济发展的影响较大,因此对其研究较多,而对于组织内部个体恶性竞争,研究较少,但是这种恶性竞争却
10月25日,刚刚获取澳门诚兴银行控股权的工商银行再度圈地新兴市场,与南非标准银行联合宣布,将以约54.6亿美元的对价收购标准银行20%的股权,成为该行第一大股东,这是工行上市以来进行的最大一笔境外收购    背景介绍  南非标准银行(Standard Bank Group,以下简称标准银行)成立于1962年,并于1970年在南非约翰内斯堡证交所上市(南非JSE交易所代码:SBK)。  2007年
7月24日,WTO总干事帕斯卡·拉米(Pascal Lamy)宣布重启多哈回合谈判将不设定时间表。这实际上承认了旨在推动多哈回合尽快达成具体协议的主要六方磋商已经破裂,或者说得更直白些,多哈回合已经死了90%。     多哈回合谈判与“贸易促进授权”     之所以说多哈回合已经死了90%, 主要原因在于美国布什政府手中的“贸易促进授权”(Trade Promotion Authority,俗称“
在制造业中,企业为提高生产效率,保障产品质量,不断对生产过程进行优化升级。本文通过对叉车车架的结构、焊接工艺分析,设计了多机、多轴协同的叉车车架焊接机器人系统,通过R
本文运用文献资料法、调查法、逻辑分析法、数理统计法等研究方法,对全国各省(市)的体育学院、综合性大学和师范性大学体育系体育舞蹈课的开展现状进行了调查,并针对存在的问
不久以前,中国和印度还是世界上两个最大的经济落后国家,如今却成了推动全球经济增长的大国,这的确非同寻常。近来的一些进展,都清楚地表明了增长理论中一些最为重要的问题。第一
目的深入认识马蹄香治疗病毒性肠炎的有效成分和作用机制。方法应用LC-10A高效液相色谱仪-蒸发光散射检测器液相色谱法(外标法)测定了马蹄香散剂和5种治疗胃肠病药物中低聚果
研究不同质量浓度低聚果糖和低聚半乳糖对发酵乳在发酵期和贮藏期内乳中菌落活菌数、滴定酸度和黏度的影响。结果表明:在发酵期低聚果糖(QHT-90 FOS)对发酵乳中乳酸菌活菌数