【摘 要】
:
基于序列标注方法大部分都是针对一些垂直领域,这些领域通常含有丰富语料。然而,当测试语料从含有大量标注语料的领域迁移到其他缺少标注数据的领域时,模型的效果一般会大打折扣,从而严重影响该方法更广泛的应用。本文针对含有少量人工标注数据的场景,以序列标注子任务之一命名实体识别问题为研究对象,在主流的命名实体识别模型的基础上,分别结合半监督学习和迁移学习的方法,取得了一定的成果,主要工作包括以下三方面:1.
论文部分内容阅读
基于序列标注方法大部分都是针对一些垂直领域,这些领域通常含有丰富语料。然而,当测试语料从含有大量标注语料的领域迁移到其他缺少标注数据的领域时,模型的效果一般会大打折扣,从而严重影响该方法更广泛的应用。本文针对含有少量人工标注数据的场景,以序列标注子任务之一命名实体识别问题为研究对象,在主流的命名实体识别模型的基础上,分别结合半监督学习和迁移学习的方法,取得了一定的成果,主要工作包括以下三方面:1.针对标注数据不足对模型准确率的影响,提出了一种基于生成式半监督学习的序列标注框架,该框架创新之处在于提出了基于多通道的序列到序列生成模型。该框架可以生成效果更好,多样性更强的标注语料,经实验证明,该框架在缺乏标注数据的场景中显著提升了序列标注模型的效果。2.针对标注数据不足对模型准确率的影响,结合基于预训练的迁移学习方法,在基于BERT-Bi-LSTM-CRF模型中验证了该方法能够提升模型在数据不充足的情况下的准确率,并且可以加速模型收敛。3.针对金融领域的公告信息抽取问题,设计并且实现了金融领域下基于BERT的中文命名实体识别系统,其中命名实体识别模型可以在适量的训练数据下达到95以上的F-1值。
其他文献
随着全球能源紧张和环境污染问题的日益严重,世界各国认识到改善能源结构促进新能源发展的重要性。风电作为可再生能源具有绿色低碳环保等优点,但由于北方供暖地区电源结构以
<正>《智取生辰纲》一文节选自我国四大古典名著之一《水浒传》的第十六回"杨志押送金银担,吴用智取生辰纲"。故事情节张弛有致、扣人心弦,人物形象个性鲜明、呼之欲出。下面
21世纪,随着全球文化间交流、交融与交锋的进一步加强,高校外语专业大学生受多元文化思潮和价值观念的冲击进一步加深,教师上好外语专业学生思想政治理论课(以下简称思政课)
立足建党百年之际,面向开启新征程之时,在全党集中开展党史学习教育,是党的政治生活中的一件大事,也是一项重大政治任务。而惟有深悟学党史的意义与根本目的,把握学党史的正
"核心素养"是近年来教育工作者关注的热点问题,但是核心素养只是对如何培养学生提出了要求,并没有提出确切的途径。经研究发现,深度学习和核心素养是相辅相成的良性关系,深度
<正>由奥斯卡金像奖最佳外语片导演让·雅克·阿诺操刀执导的中法合拍大片《狼图腾》,将在2月19日大年初一登陆全国院线。风雪夜的草原、孤身骑行的牧民和伺机待发的野狼……
企业档案信息资源与社会记忆之间的关联,可以被视作记忆研究向企业档案研究的拓展,也可以被视作企业档案研究向记忆研究的延伸。本文结合应用社会学、历史文化研究等多个领域的前期研究成果,从社会记忆构建视角出发,探讨企业档案信息资源建设的内在要求,进而提出企业档案信息资源建设的原则与路径。笔者分为三部分对社会记忆视域下企业档案信息资源建设进行研究。首先,立足于当今企业档案管理实际状况,运用文献计量法、跨学科
<正>经皮吸收药物主要是通过皮肤动脉通道、角质层转运(包括细胞内扩散、细胞间质扩散)和表皮深层、真皮转运而被皮肤乳头层中的毛细血管网吸收,从而进入血液循环,产生局部或
高考之后的志愿填报跟将来的职业有千丝万缕的关联,在高中阶段进行职业生涯规划教育具有现实价值,而高中阶段学生的学业压力大,将职业生涯规划教育与学科相融合成为在高中阶
近些年来,核能的应用越来越广泛,核能在为人类创造价值的同时也会产生核辐射,从而对周围环境和人体健康等造成损害,因此核屏蔽材料的研究显得尤为必要。本文选取钨硼化合物为功能粒子,可同时屏蔽中子和γ射线。选取质轻且能保证力学性能的铝合金为基体。首先利用蒙特卡洛模拟方法的MCNP软件根据材料的屏蔽要求并结合制备可行性对钨硼化合物/铝复合屏蔽材料进行设计。采用球磨混粉和放电等离子烧结制备复合材料并对制备工艺