现代汉语新词提取研究

来源 :河北大学 | 被引量 : 0次 | 上传用户:kkhaizi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
现代汉语新词提取研究的目的是从文本中自动识别并提取出新词,也是中文信息处理中未登录词识别的一种特殊情况。随着社会的发展,新词大量涌现,新词的识别和提取研究就越来越受到人们的重视。作为在中文信息处理中具有关键性作用的分词技术的重要环节,现代汉语新词提取具有重要的研究意义。目前,语言学家对现代汉语新词研究的许多成果都无法直接在计算机上实现,仅有有限的构词规则能运用到新词识别当中去。而基于统计的方法力图用成词概率、互信息等大量词语的统计特征来进行新词识别,但是统计得出的规律受所用语料的影响较大,很难反映出新词结构的真正特点和本质规律。因此,新词识别和提取仍是有待解决的难题。本文尝试把新词的提取分成两个阶段:新词语素的识别;含新词语素的新词提取。针对不同阶段的特点提出相应的方法:首先,提出了基于决策树的新词语素识别,把新词语素识别看作一个二值分类问题,选取单字成词概率、单字词性等作为描述属性,用C5算法构建决策树;然后,在找到新词构词语素的基础上,借鉴新词构词法研究的成果,分别构造二字新词和三字新词的构词规则,利用规则提取出二字和三字新词。实验证明,这种新词提取的方法是可行的。
其他文献
文章分析了腐蚀的原因、影响因素和在管道设计中对可能出现的腐蚀损伤采取的措施。主要包括管系的设计应采取的防腐蚀措施 ,如安全阀管道、调节阀管道、间歇操作管道和防止吹
本文比较英汉颜色词的词语搭配和习惯用法,指出在不同的文化背景下,英汉颜色词的文化内涵既有共性又有差异。
企业社会责任自20世纪初提出至今,在理论交锋和实践探索中不断取得发展。而且,随着诸多企业社会责任认证、标准和体系的制定实施并趋于一致,企业社会责任已经在全球获得广泛
美国次级住房抵押贷款危机大规模爆发,由此引发了20世纪30年代经济大萧条以来最为严重的世界金融危机。这场风暴迅速席卷全球,影响范围从虚拟经济波及到实体经济,因而得到了
文章对胜利炼油厂蜡油加氢装置的临氢高压空冷器出口管线及重油加氢装置低压酸性气体脱硫系统胺液再生塔顶空冷器出口管线的腐蚀进行了分析 ,指出H2 S含量、介质流速、温度及
后期维特根斯坦的语言哲学主要考察的是语言在日常生活中的使用。维特根斯坦的私人语言论证一直以来备受西方哲学家及学者们关注。维特根斯坦提出了“生活形式”这一重要概念
为了实现成都大庙会在首届大庙会的基础上持续健康的发展,文章对成都首届大庙会进行了分析,提出了成都大庙会应以独特性塑造主题,以参与性为开发导向,充分发挥川西民俗文化特
"教课文"是否向"教语文"转换成了深化语文教学改革的焦点与检验改革是否有效的试金石。经研究发现,其最起码涉及这样几方面转换的学理:语文学科的属性,阅读能力的范畴,教学内
古代漢字注音的方法有很多種。在漢字注音史上,反切是最不可忽視的一種,直到1918年注音字母正式公佈以前的一千七八百年間,反切始終是漢字注音的主要方法。本文旨在以《集韻