论文部分内容阅读
中文自动分词技术是自然语言处理领域一项很重要的基础工作，随着信息的几何级增长，对目前的分词方法提出了更高要求。本文从中文分词的研究现状出发，首先列举了一些具有代表性的典型分词系统，比较了当今主流的三种分词方法：基于字符串匹配、基于理解和基于统计的分词方法，并对分词问题中的歧义和未登录词识别两大难点进行了重点讨论，最后总结归纳了中文分词技术的研究进展，并对其未来发展方向进行了展望。