Chinese word segmentation with local and global context representation learning

来源 :High Technology Letters | 被引量 : 0次 | 上传用户:future_007_007_007
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
A local and global context representation learning model for Chinese characters is designed and a Chinese word segmentation method based on character representations is proposed in this paper.First,the proposed Chinese character learning model uses the semantics of local context and global context to learn the representation of Chinese characters.Then,Chinese word segmentation model is built by a neural network,while the segmentation model is trained with the character representations as its input features.Finally,experimental results show that Chinese character representations can effectively learn the semantic information.Characters with similar semantics cluster together in the visualize space.Moreover,the proposed Chinese word segmentation model also achieves a pretty good improvement on precision,recall and f-measure. A local and global context representation learning model for Chinese characters is designed and a Chinese word segmentation method based on character representationations is proposed in this paper. First, the proposed Chinese character learning model uses the semantics of local context and global context to learn the representation of Chinese characters.Then, Chinese word segmentation model is built by a neural network, while the segmentation model is trained with the character representation as its input features. Finally, experimental results show that Chinese character representations can effectively learn the semantic information. Characters with similar semantics cluster together in the visualize space. Moreover, the proposed Chinese word segmentation model also achieves a pretty good improvement on precision, recall and f-measure.
其他文献
幼儿行为是幼儿思想的具体体现,通过对幼儿行为的观察,可以充分了解幼儿的心理特征,了解幼儿的身心发展状况。从而为制定相对应的管理策略提供依据,实现对幼儿的优化管理。在实际
既要注意控制举债规模,又不能简单“踩刹车”一般而言,地方政府融资平台是指以地方政府为主导组建的,主要负责将财政资金及对外融资用于城市基础设施建设的法人,投融资项目主要涉
对于学生而言,课前预习、教学听课和课后复习是他们整体学习中的三大活动环节,而预习则是首当其冲的重要一环,有着不可低估的作用。预习的主要任务就是复习和巩固旧学,并利用
在2009年国务院通过的《黄河三角洲高效生态经济区发展规划》中.明确提出要将黄河三角洲建设成为全国重要的高效生态经济示范区、全国重要的特色产业基地、全国重要的后备土地
当前我国正处在现代化发展和建设和谐社会的关键时期,日常生活批判理论对于解决现代消费与异化的问题,实现中华民族伟大的中国梦有着重大意义。本文主要以日常消费生活为切入点
A-调和方程的障碍问题有很深刻的背景,其各种性质的研究是现代偏微分方程的一个重要任务.   本文研究了加权形式的A-调和方程的障碍问题,得到了其解的局部正则性,这一结论可
本文主要研究动力系统中关于回归熵的分形谱的估值问题和函数列局部熵的高维重分形分析. 在第一章中我们主要介绍了重分形分析的一些基本知识和本文的研究背景. 在第二
本论文主要进行脉冲随机控制模型及β-分布问题的研究,全文共分五部分: 第一部分是绪论,介绍了本文的主要研究内容及相关背景, 在第二部分中本文建立了一类新型的脉冲随机
风险理论是定量分析、预测风险的理论基础.它为保险公司的经营管理提供理论依据和实践指导.分红策略既可以吸引股东投资也可吸引顾客投保,是增强市场竞争力的重要手段.因此带分红策略的风险模型成了现代风险论的热门研究对象.本文主要是对已有的三个离散时间风险模型作进一步推广,建立其相应的带分红策略的离散时间风险模型.主要内容如下:1.首先研究了支付红利的马氏环境下一类离散时间风险模型,其索赔发生情况为在任一时
随着科技水平的提高,社会的迅猛发展,网络购物成为当前购物新时尚,其以足不出户就可以将心仪的产品带到身边这一优点受到越来越多消费者的青睐。我国有好几亿的网络购物人群,这也