基于语法功能匹配的句法分析算法

来源 :南京师范大学 | 被引量 : 0次 | 上传用户:nextronnpf
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
汉语句法分析是中文信息处理领域一个重要的基础性课题,同时也是一个公认的难题,在机器翻译、文本摘要、信息过滤、自动问答中都有广泛的应用。本文以语法功能匹配作为句法分析的基本思想,以清华大学973树库作为语法功能统计的主要资源,提出并实现了2种新算法:1.基于语法功能匹配的句法分析算法算法基本原理是:在共享森林中相邻的词/已分析出的短语间动态地进行匹配,发现所有可能的新匹配对(结点)并加入共享森林,不断循环直至不再有新结点产生,得到以共享森林中所有能覆盖整个句子的结点为根的若干棵歧义树。算法在4个方面进行了优化以减少匹配次数1.匹配阈值;2.组块捆绑;3.提前剪枝;4.控制膨胀。消歧主要依靠树的生成概率选择一棵最大概率树,提出了基于静态概率和动态概率的两种计算模型,抽取了相应的概率词典并比较了它们的消歧效果。2.基于语法功能匹配的错误恢复算法算法基本原理是:对句法分析失败的句子,首先在未分析完成的共享森林中选择若干棵活跃子树并激活,其未覆盖的词即认为是造成句子分析失败的关节点;综合如下三种资源1.自身的语法功能;2.语法功能相似度;3.词的语法功能聚类,对关节点词的概率分布进行调整,并将其作为新结点插入共享森林,在此基础上重启句法分析;对依然无法完成的分析,选择若干最宽子树强制匹配输出。最后通过实验进行了方案比较与参数设置。结果表明,本文实现的句法分析器能有效减少伪歧义,具有良好的分析效率,其分析结果包含了丰富而准确的语法信息。采用PARSEVAL评价体系,正确率与召回率在封闭测试和开放测试中分别达到88.95%、89.13%和76.75%、77.07%。
其他文献
据史料记载,仇英的《汉宫春晓图》是项元汴收藏的绘画作品中价格最昂贵的一幅,价值两百金,而文征明的《袁安卧雪图卷》也只是十六两,唐寅的《画嵩山十景册》不过二十四金,与
P2P融资新模式是近年来逐渐兴起的一种网络借贷模式。它的出现使目前的信贷模式更加多样化、全面化,对我国经济发展起到举足轻重的作用。本文在介绍P2P网络借贷运行模式和特
从本文的标题上可以很清楚的看出,今天我们要讨论的是关于功利主义经济正义思想的问题。首先,本文主要谈了谈研究背景、意义以及研究现状。从第二部分开始,主要通过对两宋时
以制造企业为研究对象,从供应链角度分析企业面临的不确定性因素,提出基于供应链的企业生产计划控制模型,构建一个科学的、鲁棒性较强的企业生产计划控制系统,从而尽可能地降
《洛阳伽蓝记》是北魏杨衒之写的一部记载北魏都城洛阳四十年间佛教寺塔兴废的著作,此书语言庄重典雅,反映了中古时期的语言面貌。本文以《洛阳伽蓝记》为专书语料,全面统计
随着新课标在中职学校的不断深入,以学业水平考试为主的测评形式在中职英语教学中普及开来,大部分教师也因此积极地对教学方式及目标作出了相应的调整,但还存在着一定的不足
日本的殖民统治,给台湾和朝鲜半岛留下了沉痛的伤痕,比较日本对台湾和朝鲜半岛的殖民统治,从历史文化、专制统治、地主制度、"皇民化"的应对到历史清算,则显示出不尽相同的特
目的观察羟考酮复合奈福泮用于全髋关节置换手术的术后镇痛效果。方法选择全身麻醉下全髋关节置换手术ASAⅠ或Ⅱ级患者50例,随机分为对照组和试验组,每组25例。两组麻醉诱导
——不是将博物馆纪念产品的开发仅仅视为一种技术与经济的过程,而应同时将其看作是一种人类文化的承袭、积累乃至创新的行为。作为当代休闲的重要形式——文化休闲,博物馆具
马克思主义哲学是研究自然界、人类社会和思维的本质和运动发展的普遍规律的科学,反映了一切具体科学的共同规律,对各门科学均具有普遍的指导作用。哲学方法是一切方法中层次