在篇章中面向产品类的命名实体识别研究

来源 :中国中文信息学会,沈阳航空工业学院 | 被引量 : 0次 | 上传用户:fancysoul
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
命名实体识别是中文信息处理的一个重要问题.本文根据篇章中利用互信息识别命名实体的方法,引入词性互信息和有距离的匹配策略,通过词表层信息和有距离匹配策略的融合方法识别出面向产品类的命名实体.同时融入一些知识和规则方法,取得了很好的效果.
其他文献
佤语音节的配合规律是佤语的特点之一,对它的研究可以使我们更进一步了解佤语的结构特点及发展规律。本文阐述了瓦语的音节配合的模式,分析了音节配合规律对构词的影响。
本文对苗瑶语声调的变化进行了分析。文章围绕苗瑶语声调的分化、苗瑶语声调的合并、苗瑶语声调的裂变等进行了论述。
本文对南宁市白话声母系统与普通话、中古音声母系统进行了比较研究。文章介绍了南宁市白话的发音特点,阐述了南宁市白话声母系统与普通话、中古音声母系统的对应关系。
本文对云南他留话的语音及其特点进行了分析。文章介绍了他留话的声母、韵母、声调及音节结构,并在此基础上,通过和彝语支、缅语支,以及与彝语诸方言的比较,认为他留话与彝语支语言,尤其与巍山彝语的关系是非常接近。
本文对藏语拉萨话语音声学参数数据库进行了介绍。文章围绕语音的标注符号、语音声学参数数据库结构和特征选择、语音采样数据、数据库文本集等进行了论述。
本文基于条件随机域模型处理中文命名实体中的人名、地名、组织机构名识别,综合利用外部特征,研究了字一级包括外国译名在内的中文人名、地名、简单组织机构名的识别,采用了利用互信息获取外部统计词典并建立外部特征的方法.初步实验结果表明,外部特征的加入可以弥补训练规模的不足、显著提高识别效果.
分词不一致的处理是建设一个高质量的语料库所无法回避的问题,识别出分词不一致的不同成因是处理的前提和关键.本文提出了一种基于机器学习的分词不一致自动识别方案,通过两遍识别,以特征词法识别结果为基础,让机器从中学习到规则后辅以人工规则再处理第一遍未识别的不一致字串.我们对200万字语料库中的分词不一致字串进行了实验,封闭测试与开放测试的正确率分别达到85.22%和83.13%.
本文给出了基于非连续短语的统计翻译方法,翻译的基本单元从连续短语扩展到带有间隔的非连续短语,这种方法可以更好地解决句子中词语翻译时的上下文依赖问题.在形式上,非连续短语方法和层次型短语方法相似,不同之处在于前者只允许包含一个非终结符的短语(如turn on),因此,非连续短语方法抽取的短语数量较少,搜索效率也得到提高.初步实验表明,非连续短语方法的翻译结果是令人满意的.
传统的网页分类大都基于内容,这种方式采用字词特征项匹配的方法,没有考虑网页的结构信息.为了充分挖掘网页的结构特征,本文提出了网页按形式分类的机制.以往关于形式分类的研究大都基于普通文本,但是网页文本不同于普通文本,它具有URL和HTML标签等对网页结构有较大影响的特征.本文从URL和网页的HTML标签中提取特征,并借用了普通文本形式分类中使用的部分特征项作为网页形式分类的特征集合,最后使用SVM分
条件随机域模型通过计算标注序列在观测序列下的条件概率进行标注,解决了传统模型(如隐马尔科夫模型和最大熵马尔科夫模型等)中存在的标注偏差问题,得到了更好的标注效果.时间信息识别是文本序列标注的一个典型代表,本文旨在通过CRF在英文时间信息识别的应用,从理论上深入分析,以及进行对比实验比较条件随机域与其他标注模型的效果,结果验证了理论和实验的一致性,CRF更适合解决序列标注问题.