【摘 要】
：
近年来基于字的方法极大地提高了中文分词的性能,借助于优秀的学习算法,由字构词逐渐成为中文分词的主要技术路线.然而,基于字的方法虽然在发现未登录词方面有其优势,却往往
【机 构】
：
沈阳航空工业学院知识工程中心,香港城市大学中文、翻译及语言学系
【基金项目】
：
国家自然科学基金No.60842005;国家高技术研究发展计划(863)No.2006AA01Z148;国家教育部科学技术研究重点项目No.207148~~
论文部分内容阅读
近年来基于字的方法极大地提高了中文分词的性能,借助于优秀的学习算法,由字构词逐渐成为中文分词的主要技术路线.然而,基于字的方法虽然在发现未登录词方面有其优势,却往往在针对表内词的切分效果方面不及基于词的方法,而且还损失了一些词与词之间的信息以及词本身的信息.在此基础上,提出了一种结合基于字的条件随机场模型与基于词的Bi-gram语言模型的切分策略,实现了字词联合解码的中文分词方法,较好地发挥了两个模型的长处,能够有效地改善单一模型的性能,并在SIGHAN Bakeoff3的评测集上得到了验证,充分说明了合理的字词结合方法将有效地提高分词系统的性能,可以更好地应用于中文信息处理的各个方面.
其他文献
<正>纳兰性德作为康熙皇帝的侍卫,经常扈从康熙帝出巡边塞上,为了抵御沙俄侵略,团结边疆少数民族,他还到东北边塞完成"觇梭龙"的艰巨任务,所到之处,留下不少边塞行吟作品。康
高压热杀菌技术(HPTS)是一种重要的杀菌技术,研究细菌芽孢皮层肽聚糖的结构对阐明HPTS处理下皮层肽聚糖的水解机制及芽孢失活机制有重要意义。从枯草杆菌芽孢中分离提纯出皮
综述了乳化石蜡的制备工艺 ,性质及其影响因素如乳化剂的选择、用量 ,乳化水的加量 ,乳化温度、时间、搅拌速率等 ,以及其在各领域中的应用
<正>大数据时代,就是一个数据为王的时代!进入信息化时代,我们每一个人都能感受到与信息相关的数据无处不在。我们在生产、生活、社会管理中每一天都在产生海量的数据,数据也
公务员的职业精神是公务员精神的核心组成部分。当代美国公务员职业精神的基本内容包括高效服务、清正廉洁、追求卓越和乐善好施四个方面。借鉴美国公务员的职业精神,培育我
"校园贷"是一种在互联网金融背景下出现,面向高校大学生的新型消费借贷形式。"95后"大学生作为我国最具消费潜力的年轻消费群体,其独特的消费理念和行为新特征,给非法"校园贷
素质教育下的小学社团活动,注重过程性管理的有效性,促成学生生命健康的成长。本文针对小学社团活动管理中存在的问题进行了简要阐述,并提出几点个人看法,仅供参考。
从儒学发展的角度，运用综合与比较的方法，分析了初唐儒学的特点，认为唐初统治者为了国家的长治久安，对儒学的推行具有全方位性。同时，我们也应该知道，与后来宋代儒学的比较来看，唐代
1991年我国食糖市场放开以来。食糖行业得到快速发展。但缺少期货市场的预期指导。运行很不平稳。糖价的大起大落使蔗农、糖厂、糖商和以食糖为原料的加工企业均承担着巨大的
短信文本信息流携带了丰富的信息资源,为了在其中挖掘出多热点事件,给出了短信文本信息流在线分检算法,该方法采用特征词共现频度定义了特征词相关度,综合前导信息集合及信息