金融领域知识图谱构建的关键技术研究

来源 :西南财经大学 | 被引量 : 0次 | 上传用户:qq251775522
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
传统金融行业中各类型数据丰富,蕴藏着巨大价值,如何有效地使用这些数据并从中提取有用信息,帮助用户进行决策,是目前金融业内人士面临的一大问题。而构建金融领域的知识图谱可作为该领域语义理解及搜索的关键技术,为以后金融领域的文本分析、数据挖掘、决策推理等提供有力支撑。
  知识图谱是2012年Google公司提出的一个新概念,是一种用图模型来描述知识和建模世界万物之间的联系的技术方法。知识图谱由节点和边组成,<实体、关系、实体>的三元组形式是知识图谱的基本组成单元。通常用实体代表图里的节点,描述现实世界中的事务,比如人、公司、概念等,用关系代表图里的边,表示实体间的某种联系,如<乔布斯、创建、苹果公司>代表乔布斯和苹果公司的关系是创建。知识图谱在早期主要应用于增强搜索引擎,随后知识图谱在智能问答、语义理解、推荐计算等多方面展现出丰富的应用价值。
  本文将探索金融领域知识图谱构建的相关关键技术研究,主要调研并解决如何从金融教材的无结构化文本中进行实体识别和关系抽取。在我们未来的研究计划中,会对构建完善的金融领域知识图谱进行深入挖掘,并开展金融知识问答、自动财报审核等金融文本理解的相关工作。而这些工作必须以金融知识图谱为基础设施。因此,研究知识图谱构建的关键技术是实施人工智能(或金融科技)非常重要的工作。本文主要工作如下。
  (1)对知识图谱的关键构建技术做了一定介绍,包括实体识别以及关系抽取。重点概括了命名实体识别及关系抽取领域的研究历程,分析比较了现有模型的优劣,着重讨论了深度学习模型对解决中文实体识别任务和关系抽取相较于其他模型的优势之处。
  (2)本文针对金融领域的实体识别在传统的Bi-LSTM-CRF模型上做出改进。在输入层由单一的字向量转为基于融合字词向量的嵌入,并引入自注意力机制(Self-Attention)来学习句子内部的长距离依赖,增强模型的特征提取能力。词向量相比传统的字向量,包含了更丰富的语义信息,将字向量与词向量通过加权求和再平均的方式结合传入模型。同时采用词向量作为输入可以减少人工标注的成本。而加入的自注意力机制可以识别句中相对重要的内容,通过赋予不同的权重来提高它们的重要性。实验结果表明,改进的Bi-LSTM-CRF模型能有效识别金融领域的专有名词实体,较以前的模型有更好的性能。
  (3)本文分别针对字向量和词向量的获取做了一定改进。通过BERT中文预训练模型获取语料中每个字的字向量,该模型采用海量维基百科语料进行的语言模型预训练,能学习到潜在的语义信息。同时基于金融领域教科书语料使用fastText算法训练专有领域的词向量,通过字向量与词向量的融合作为增强词向量输入到实体识别模型的Embedding层。
  (4)本文设计了一种基于依存句法分析的无监督关系抽取方式。针对已经命名实体识别处理的数据,通过哈尔滨工业大学的LTP工具包进行词性标注和依存句法分析,通过分析语素单位之间的依存关系总结句法结构。基于该语料下的句法结构,本文设计了7种关系抽取语义范式RESF(Relational Extraction Semantic Forms),如修饰结构、动词结构、并列结构等,覆盖了大部分中文语法规则,并通过实验证明该方法在关系抽取方面的有效性。
其他文献
近年来,新的战争背景对大口径火炮的稳定性提出了更高要求,自动装填系统在提高单位时间火力密度的同时,复杂的机械结构和高使用率也使其成为火炮故障频发的子系统之一,其中链轮作为弹仓内部的重要部件,对于弹药运输及装填过程具有重要作用,极端恶劣的实战环境造成链轮组件的故障率居高不下,直接影响到火炮的性能,因此对火炮弹仓链轮故障诊断系统的研究具有重要意义。  本文针对弹仓链轮的各类故障,研制一套弹仓链轮故障诊
近些年来,随着分数阶微积分理论的飞速发展,以及在实际的物理系统中越来越多的应用,分数阶系统的相关研究也成为了一个较为热门的方向。分数阶微积分作为整数阶微积分的推广,对一些复杂系统可以有更简洁的描述,并且分数阶微积分的引入可以增加控制器设计的自由度,改善控制品质。然而,在系统实际运行过程中,环境的变化、系统器件的磨损等原因会使得所建系统模型不再精确,也可能降低系统的可控性甚至导致系统处于不稳定状态。
火工品是内部装有火药的一次性使用装置,当其受到外界刺激时,会引发内部火药发生燃烧或者爆炸,从而输出能量完成起爆工作。作为先进军事武器系统的第一能源产品,火工品的安全性、可靠性和先进性与武器弹药系统的安全性、可靠性和先进性紧密相接。火工品性能由火工品参数进行表征,针对火工品参数对外界环境敏感,导致对于参数的获取及测量准确性变差这一问题,本文采用Volterra模型与在线参数辨识算法相结合的思想对火工
学位
近年来,人体行为识别技术广泛应用于视频监控、智能医疗教育、无人驾驶、日常行为分析等方面,在安防领域扮演着举足轻重的角色。军事上,行为识别技术已应用于军事化研究基地、国防边境、哨所等戒备森严的军事重地,通过检测区域内可疑行为,为环境感知及决策者远程决策做出贡献。  尽管基于深度学习的人体行为识别技术已取得了很多成果,但仍存在基于RGB视频的模型严重依赖物体和场景、行为特征表达不够合理等问题。针对上述
随着化石燃料的日益消耗和环境污染的加重,能源结构逐渐发生改变,新能源所占的比重逐年上升。并网逆变器是新能源电力系统的重要环节,作为新能源电力的并网接口,其地位和作用十分显著。并网逆变器工作稳定性除受自身因素作用外,还受来自电网干扰的影响,电网电压的平衡状况、谐波含量会对逆变器输出波形质量造成影响。如何使并网逆变器在电网情况较为恶劣的条件下,仍能安全高效的运行,成为现阶段研究热点。本文以三相并网逆变
如今,全球的能源需求和发展已逐步向可再生能源转型,并将成为最终目标。因此,风能作为清洁可再生能源的重要代表,风电产业得到了飞速发展,变桨距风机已经成为风电机组中主力机型。变桨系统通过改变风力机叶片的桨距角,提升风能的利用率和输出功率。由于风机变桨系统的执行器故障发生频繁,故而,对变桨系统执行器故障诊断和容错控制的研究对提升风机运行的可靠性和降低发电成本有着重要意义。  本文以风电机组变桨系统为主要
学位
火灾作为破坏性非常大的灾害之一,每年都会对经济和环境造成巨大损失。因此,及早发现火灾并进行预警对火灾防治具有至关重要的作用。目前火灾识别的方法已经从传统传感器探测演变为图像型火灾的研究,但仍存在特征选取盲目和识别率低的问题。针对此问题,本文重点研究基于深度学习的火灾识别方法,主要研究内容与创新点归纳为以下几个方面:  (1)深度神经网络模型的相关研究  对全连接神经网络和卷积神经网络的结构和算法进
学位
脑卒中是一种急性脑血管疾病,是由于脑血管破裂而引起脑组织损伤,目前已成为我国成年人致残的首要原因,近些年来发病率一直在逐年递增。一半以上的脑卒中患者会有上肢偏瘫的后遗症,上肢无法自主活动,严重影响日常生活。现阶段,长期的康复训练是治疗脑卒中患者上肢偏瘫最好的方式,临床上对患者训练的评估主要依靠医师的个人经验。在没有康复治疗师现场指导的情况下,使用轻量、高效、可靠的计算机系统对患者上肢康复训练进行评
学位
文字是人类交流信息的工具,是简单的视觉图案再现口语所表达的形式。随着深度学习技术的不断发展,自然场景文本检测技术已经成为计算机视觉与模型识别等领域的重要研究课题之一。本文针对自然场景下的文本检测问题进行了研究,不同于传统的光学字符识别技术所识别的文本图片,自然场景图像中的文本在外观上,具有字符大小不统一、文本方向不确定、背景复杂等特点,使得检测难度较大,也为后续的识别过程带来不必要的麻烦。针对自然
学位
随着大数据时代的来临,越来越多的应用程序应运而生。为了提升用户的使用体验,增大用户黏性,个性化推荐算法成了各大应用程序寸土必争的领域。目前主流的个性化推荐算法大部分是通过用户以往对于产品的评分来研究用户的喜好,进而向用户提供推荐列表。然而,目前面临的难题是网络上用户评分过于集中,评分可信度不高,导致推荐算法的推荐准确率并不理想。  网络信息越来越丰富,能体现用户情感的信息也越来越多,除了用户的评分