自动分词中未登录词问题的一揽子解决方案

来源 :语言文字应用 | 被引量 : 0次 | 上传用户:lslandgp1972
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
确定未登录词边界是汉语自动分析中特有的一个问题,未登录词的种类和数量之多,是处理大规模真实文本的严重障碍。本文分析了现有的解决未登录词问题的各种方案,提出两趟分词、在“分词碎片”中计算单字成词概率和未登录词概率的一揽子解决方案,并报告一个初步的、令人鼓舞的开放测试结果。
其他文献
从中西哲学的比较研究、参照西方哲学史框架构建中国哲学史、《中国哲学史新编》里的融会贯通三个方面考察冯友兰哲学的中西融合与会通。这有助于加深对冯友兰哲学的理解,同时
科学合理地应用优良的生产管理技术是橡胶产业可持续发展的关键,是保证橡胶树高产稳产的重要基础。本文回顾总结了几十年以来云南西双版纳国有农场科学的橡胶树割胶技术和管理
目的:探讨高脂血症性暴发性胰腺炎的中西医结合治疗的方法及可行性。方法:对10例高脂血症性暴发性胰腺炎患者在常规抢救治疗的同时,给予丹参注射液静脉滴注,中药经胃管内注入等
在中学音乐欣赏课教学中,我们可以通过探索问题的方法激起学生的兴趣,让学生们带着问题去欣赏音乐作品,在作品欣赏中寻找答案,继而对作品进行深入研究,提出更多的问题,最终把问题与
金川龙首矿固结粉胶凝材料早期强度低,影响固结粉在金川矿山推广应用,为此开展固结粉细度分析以及充填料浆配比研究。首先,对原状固结粉进行0.5,1.0h和1.5h粉磨,获得比表面积
<正> 癌症化疗所引起的噁心和呕吐是化疗中最讨厌的副作用,有时甚至比癌症本身所引起的症状还难受。因此,处理好化疗所引起的噁心,呕吐极为重要。吩噻嗪类(Phenothiazines)和
21世纪是海洋的世纪,海洋空间和海洋资源将成为区域竞争的主要焦点。长三角海洋经济区作为我国三大海洋经济区之一,海洋资源丰富、海洋经济发达。但海洋经济作为陆域经济的延
文章从生产情况、主要种植品种、新技术应用、市场销售情况4个方面介绍了2017年河南省马铃薯产业发展现状,分析了存在的主要问题,最后提出了发展建议。
提出一种新型步进电动机PWM微步驱动技术方案,阐明了其实现机理,描绘并实测了相应的波型。对所设计的微步驱动器进行简要分析,并给出整个系统的运行情况。