基于分布式系统的句子相似度计算的研究与应用

被引量 : 0次 | 上传用户:iswhat
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在自然语言处理领域,句子相似度计算是一项基础研究工作。它为与其相关的领域的发展提供支撑作用。在构建词义知识库的过程中,它对相似词和相似句子的判断作用巨大。本文对句子相似度计算进行了重点研究,提出了一种基于分布式系统的句子相似度计算方法,通过实验对其有效性进行验证,然后结合项目中的构建过程给出了具体应用实例。本文主要做了以下工作:(1)对词语相似度计算进行了详细研究,提出了一种改进的基于《知网》的词语相似度计算方法。利用语义词典丰富的语言知识进行计算。本文对基于《知网》的词语相似度计算进行了研究,对其做出了改进。(2)提出了一种基于分布式系统的句子相似度计算方法。在上述工作的基础上,本文对句子相似度计算方法进行了研究和改进。使用MapReduce技术,在Hadoop平台的基础上对句子进行并行化的相似度计算。因为语言信息是结构化的,易于分割为多个可同时进行处理的子项目,本文给出了语言信息的切割方法,提出了基于分布式系统的句子相似度计算方法。(3)结合词义知识库的构建过程演示了基于分布式系统的句子相似度计算的实例。结合词义知识库的构建,详细阐述了基于分布式系统的句子相似度计算的实现过程和操作步骤,通过实验对其有效性进行验证。
其他文献
“材料科学基础”是材料科学与工程专业的必修课。根据“新工科”人才培养要求,力图改变传统教学模式,在教学内容、教学方法和考核方式等方面实施一系列改革实践。在提高教学
凡士林油纱布为油性物质,灭菌难度大,干烤后的凡士林油纱灭菌效果可靠,但干烤过程中箱内热量有时会出现不均匀,散热慢,水分丧失多,至使油纱干燥、黄脆,甚至出现焦黄的现象影
安全始终是航运界关注的焦点,而危害可以说是安全的孪生兄弟。据权威机构的数据显示,船舶事故中大约80%-85%的案件是由船舶工作人员的疏忽大意、操作不合理、管理缺失等原因
骨关节炎(osteoarthritis,OA),又称增生性关节病、退化性关节炎病、老年性关节病。本病为一类侵犯各个关节的炎症病变,具有慢性、进行性、无菌性等特点[1]。因其多发于活动量多
重金属在环境中很难降解,具有长久的潜伏性,从而对人类的健康可能构成严重的威胁。本研究主要用碳羟基磷灰石(CHAP)对哈密钾长石(RK)进行负载改性得到材料(CHAK),考察CHAK对水中Pb2+、Ni2+的吸附性能以及对土壤中Pb、Ni生物有效态的影响,再通过盆栽苜蓿试验验证其稳定效果。研究内容有以下几个方面:1、钾长石改性材料的制备与表征对哈密钾长石进行负载碳羟基磷灰石改性,结合单因素实验和响应
就汽车变速箱内齿轮表面不同渗碳强化工艺,及其渗碳后强力喷丸复合工艺,对接触疲劳,弯曲疲劳和小能量多次冲击疲劳性有的影响,进行了试验研究,结果表明,渗碳后强力喷丸一面复合强化
美国房地产是否存在泡沫?泡沫何时破灭?泡沫破裂对美国经济会有何影响?这是最近几年来美国官方、民间普遍关注的国内问题。由于美国经济与世界经济及我国经济密切相关,美国房地产
《国际税收》是一门理论性较强的课程,需要学生具有扎实的税收专业基础知识和法律基础知识,但这正是该课程教学中学生知识比较薄弱的地方,给教学工作带来一定的难度。此外,在
近年来随着互联网技术的飞速发展,网络社会吸引了越来越多的参与者,逐渐成为人们从事公共活动的重要空间。同时,网络社会的发展一方面对推动整个社会的发展产生了极大的积极影响
五胡十六国及北朝(以下简称北朝)前后约三百年,是我国历史上第二次波澜壮阔的民族大交流大融合时期。战乱期间,民族之间的迁徙、冲突,为北方各族各地区的文化传播交流,提供了新的广