论文部分内容阅读
词法分析是自然语言处理系统首要的词汇级语言分析模块.本文以MatLink英汉机器翻译系统为基础,介绍了词法分析所要求的语言知识及其组织结构,并给出了处理这些语言知识的算法.本文提出的词法分析器结构模型,不仅具有自学习功能,而且最大限度地从语义角度进行词汇级词语组合.实验表明,该词法分析模型可以降低句法分析的复杂性,提高语言分析的正确率与分析效率.