论文部分内容阅读
本文基于自建TEM-4完型填空题目库,中国学习者语料库(CLEC)和英国国家语料库(BNC),以英语专业四级考试的完型填空测试文本和题目为研究对象,对该项目的内容效度进行实证研究,具体分析文本内容效度与考点内容效度。完型填空这种测试项目被多种语言测试所采用,但却一直具有争议性。内容效度为测试效度中最重要的一个方面,而完型填空的内容效度如何仍然未知,基于对该问题的兴趣,作者决定对完型填空的内容效度进行实证研究。 研究主要回答以下三个问题: 1.2010-2014年专四完型填空测试项目所选的文本是否具有代表性?具体特点如何? 2.2010-2014年专四完型填空测试项目考点中的正确选项真实性与代表性如何? 3.2010-2014年专四完型填空测试项目考点中干扰项的设计代表性与真实性如何? 具体研究步骤如下:首先,收集2010-2014年专四完型填空考题作为研究对象,将其手工输入电脑建成微型文本语料库,运用Readability Analyzer1.0分析上述语料的文本内容效度、包括文本长度、文本题材、文本体裁、文本中新信息的分布以及文本的难度以及易读性如何;其次,分析考点的内容效度,包括正确选项与干扰项,作者统计了每一年的考点分别测试了哪些知识,包括词汇,搭配,语义衔接等。然后作者在BNC中检索了每年正确选项的频率以验证其覆盖面与真实性。接着,作者根据CLEC中的错误类别统计了该测试中的错误类别,发现CLEC中的61项错误类别在该测试中只出现了14项,接着作者将其在该测试中的频数、比例与其在CLEC中的频数、比例做对比。最后,作者分析了这14种错误类型在两个语料库中的相关系数并抽取一个考点分析用Z-score分析其搭配力。 研究发现,2010-2014年专四完型填空的文本总体来说符合考试大纲的要求,但是也存在一些不足,比如题材单一,缺乏多样性。根据在BNC中检索的数据, 该测试考点正确选项具有真实性与代表性,从而保证了该测试具有较高的内容效度。但是,干扰项的设计明显不足,干扰项的错误类型并不能代表学生在日常学习中的错误类型,因而专四考试完型填空的内容效度还有待提高。 希望本研究对应于语料库提高语言测试的内容效度相关领域的研究有所启示,帮助提高语言测试试题的命题工作质量和语言测试的真实性。