论文部分内容阅读
随着国际互联网的快速发展,Internet上信息资源类型和数量都愈来愈丰富,所使用的语言亦愈来愈具有多样性和不平衡性;同时随着网络用户数量与范围的急剧膨胀,其所掌握的语言也开始呈现多样化。由于网络资源语种的多样性和网络用户所掌握语言的差异性不可避免地给人们利用网络检索信息带来了语言障碍,例如网络中65 %以上的信息都是英语信息,而使用英文的网络用户仅占约30 % ,这给非英语国家用户利用网络信息带来了极大的不便。不仅在互联网中,在所有同时存在多语种的信息系统(如数字图书馆)中,这种语言障碍都限制了人们对信息的有效获取,影响了多语种信息价值的充分发挥。从上世纪90年代末开始,人们对信息检索提出了更高的要求,即不再满足于在同一语种中进行检索,而要求在检索结果中包含多种语种的相关信息。为解决人们在从多语种信息系统中获取信息的过程中存在的语言障碍问题,研究学者提出了使用一种语言即可以方便地检索出系统中存在的所有语种相关信息的方法和技术,称为跨语言信息检索(Cross-Language Information Retrieval ,CLIR)技术。基于辞典的模式和机器系统翻译的技术一度成为人们进行跨语言信息检索的热点研究技术。基于辞典的模式就是采用机读辞典来做翻译,这里主要的问题是词汇的歧义性,一个词汇可能有多重意义,因此产生类似一般机器翻译系统选词的问题。另一个问题是辞典本身的覆盖度不够,动态的专有名词如人名、地名、机构名称等日新月异,很有可能在翻译过程中在辞典中找不到。而机器系统的翻译主要是针对文档翻译进行的,文档翻译的缺点是执行效率不高,翻译往往不够确切。为解决上述问题,我们提出了一种基于偏最小二乘理论的中间语义的跨语言信息检索方法。实验结果显示,基于中间语义的跨语言信息检索方法具有良好的特性。本文的创新之处有:第一,利用改进的偏最小二乘理论技术,提出了基于中间语义的跨语言信息检索模型;第二,建立了一定的中英文平行语料库,为以后扩充中英文平行语料库打下来了一定的基础。