基于N-GRAM的朝鲜文索引方法与性能评价

来源 :小型微型计算机系统 | 被引量 : 0次 | 上传用户:aman25826882
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在为检索信息而索引朝鲜文时,通常的做法是对语句和词素进行分析后把名词抽取成索引词.但由于分析的模糊性,若在对词素进行分析时出现参考的词典上不存在的未登录词的情况,就很难抽取正确的索引词.N-gram不需要对词进行语言的分析,因而索引速度快,而且对词素分析词典里不存在的未登录词的分析有利,所以对分析复合名词有很好的效果.但与别的分析方法相比,使用N - gram时会出现因索引词抽取得太多而导致存储空间使用率低和索引效率的下降.为了克服N-gram的缺点,本文提出了一种新的朝鲜语自动索引方法.该方法首先把体词与谓词抽取成索引词后,再利用语句类型规则对词素分析中失败的语句进行助词分离,最后在未登录词处理中使用N - gram的索引方法.对比分析和性能评价表明,所提出的方法是有效的.
其他文献
能源日趋紧张,能源危机在全世界形成.由于能源的紧缺,燃料的价格在成倍上涨,生产成本也在日益提高,节能降耗,回收工业废热,降低工业生产成本,提高工业生产的经济效益,己成为
在工业建筑以及民用建筑中经常会遇到大体积混凝土,比如箱型基础、筏式基础,本文就大体积混凝土的配合比设计、材料选用、搅拌、温控措施、施工措施等问题加以阐述.
本文首先分析了我国水利工程的造价控制与造价管理现状,然后提出了我国水利工程造价控制中存在的问题并根据项目建设环节提出了加强水利工程造价控制的策略.
期刊
AMR-WB是一个可以在低速时取得很高语音质量的宽带语音编码器,但是当AMR-WB编码算法应用于一些对硬件要求比较苛刻的领域时,其编码的复杂度偏高。固定码本搜索方法在语音编码中占有很大的比例,论文提出了用于AMR-WB语音编码标准的一个新的快速固定码本搜索方法,使其计算量下降了44.3%。
期刊
在建筑工程中桩基技术是非常重要的,其直接影响到建筑工程的施工种类.本文结合实例介绍了建筑工程中桩基技术的应用.
建筑工程中成本控制的重点工作就是通过造价管理来实现的,而在具体的实施过程中,直接接触资金管理的支出和分配的就是前期的财务预算和工程竣工时的结算工作,从这两项工作的
期刊