基于领域词典的动态规划分词算法

来源 :南京理工大学学报 | 被引量 : 0次 | 上传用户:isaxu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于中文分词的复杂性,不同专业领域具有不同的词典构造。该文通过隐马尔可夫模型(Hidden Markov model,HMM)中文分词模型对文本信息进行初步分词,并结合相关的搜狗领域词库构建出对应的领域词典,对新词出现进行监控,实时优化更新,从而提出了一种基于领域词典的动态规划分词算法。通过对特定领域的信息进行分词实验,验证了该文提出的分词算法可获得较高的分词准确率与召回率。实验结果表明,基于领域词典的动态规划分词算法与基于领域词典的分词算法相比,准确率和召回率都有提升。基于领域词典的动态规划分词算法与传统的smallseg分词、snailseg分词算法相比,分词召回率和准确率都有提升,分词召回率提升了大约1%,分词准确率提升了大约8%,进一步说明了该文提出的分词算法具有很好的领域适应性。
其他文献
我与《学术研究》结缘李玉梅(香港教育学院高级讲师)我认识《学术研究》两位主编先生于1996年的夏天,我应中山大学历史系张荣芳教授之邀参加中国秦汉史研究会年会暨国际学术会议。
去年2月份日本文化厅所属的文化审议会国语分会敬语小委员会以答复时任文部大臣的形式归纳了新的“敬语指南”。这部指南值得关注的一点是将传统的学校教育中沿用的敬语三分
煤矿机电设备在煤矿企业的生产过程中占有举足轻重的地位,其管理、维护工作得当不仅能够减少煤矿安全事故,还能够减少购买煤矿机电产生的费用,提高煤矿的产煤量,而且还能促进
随着科技的发展,很多智能化的电驱动玩具成为当今儿童新宠。这些玩具的控制部分大都含有电子线路,如果电路设计和制造过程中存在失误,可能造成对儿童的伤害。
中国建材联合会印发的《推进砖瓦行业供给侧结构性改革打赢四个"攻坚战"的指导意见》和国家工信部发布的《关于加快烧结砖瓦业转型发展的若干意见(征求意见稿)》以世界眼光、
1.稿件可用中英文两种语言撰写。按以下顺序书写:题目(一般不超过20字)、作者姓名(署名不宜超过6位)、作者单位(附所在城市和邮编)、摘要、关键词(3~8个)、中图分类号、文献
产品设计灵感源于日出,造型如一轮红日在东方地平线上缓缓升起,金碧辉煌的盛景让人仿佛己梦回大唐盛世。梦唐整体方中带圆,简练的线条将日出的绚丽形象淋漓尽致地展现在世人面前
<正>本刊讯2017年7月24日,中国砖瓦工业协会《烧结砖瓦工业大气污染物治理设施设计及验收技术规范》团体标准制定第一次工作及研讨会在贵阳召开。会议由中国砖瓦工业协会秘书
随着经济的快速发展,我国的能源需求量呈现出了爆发式增长。近年来,以可再生能源为主的分布式发电技术得到了快速发展, 与传统电力系统相比,克服了传统大系统的一些弱点,成为
纳络酮是一种阿片受体拮抗剂,具有改善局部血液循环,保护脑细胞,减轻脑水肿和快速中枢催醒逆转意识障碍的作用.我院于1999年1月至2001年1月应用纳络酮治疗急性脑梗死51例,对