论文部分内容阅读
[摘 要]试卷分析不仅是检验教学成果、帮助提高教学质量的有效方法,而且是检验试卷本身科学性、合理性的必要步骤之一。对江西省龙南中学2017年高一下学期期末英语考试试卷进行的效度、信度、难度等方面的质量分析研究结果如下:该试卷测试了学生的能力水平,包括听力、词汇、语法、阅读和写作能力,信度和效度值相对较高;该试卷在选择题的设计上存在问题,区分度不高;该试卷难易度比例恰当。
[关键词]高中英语;期末试卷;质量分析
[中图分类号] G633.41 [文献标识码] A [文章编号] 1674-6058(2018)22-0042-02
试卷分析不仅是检验教学成果、帮助提高教学质量的有效方法,而且是检验试卷本身科学性、合理性的必要步骤之一。本研究以智学网所提供的学生考试成绩为参考数据,对江西省龙南中学2017年高一下学期期末英语试卷进行效度分析。智学网为用户提供更简单易用的操作系统和全面完善的资源服务,通过大数据分析充分挖掘校园考试价值,通过基于云服务的PC及移动终端综合方案为每一名教师和学生提供针对性教和个性化学的信息化环境与服务,进而有效保障了数据的精确性。研究数据是从参加考试的所有班级中随机抽取的两个班级学生的成绩,研究对象为高一即将升入高二的学生,分析报告不仅为撰写试卷分析提供参考,同时还为教师针对学生的实际能力水平做出相应调整提供了必要依据,为接下来新学期学生对学过知识的查漏补缺以及新知识的学习做好准备。
一、研究设计
1.测试对象
本研究的受试是高一即将升入高二参加期末考试的学生,从高一年级所有班级中随机抽取了两个班级,共114名学生,所有学生都完成整套试卷的作答,因此本研究有效的试卷为114份 。
2.试卷构成及其评分
本次期末试卷结构见表1,本试卷卷面总分为150分,考试时间为120分钟,总题量有81道,其中单项选择题有60道,每题给出一定选项,要求选出与题意相符合的选项。答案要求涂在答题卡上,由机器统一阅卷。非选择题有21道,其中客观题有20道,主观题有1道,一套试卷由一名教师批改打分。
二、试卷质量分析
1.效度分析
效度是指“一个测验能测出预定要测量的事物的程度”,即试卷与测试目标一致的程度。(余冬梅,2010)该试卷采取一题一考点的方式检查学生词汇知识和理解能力,针对性强。教师可以及时准确地了解学生的掌握情况和教学效果。而且题目的选项上既有三个选择项,也有四个选择项和多个选择项,这些单项选择题完全体现了语言能力测试多维性的特征。同时,试卷是按照现代统计学正态分布原理按级随机提取试题合成。以上这些都使该试卷具有较高的测试效度。
2.信度分析
考试信度是指考试结果反映考生实际水平的可信程度。计算考试信度的方法有很多种,多数方法对课程考试来说实施起来难以操作。因此,课程考试的信度测量方法一般采用克伦巴赫(Cronbach)的α系数法。α系数反映了试题间的一致性程度,具体做法是把测验分成几个部分,然后求各部分的一致性程度。计算公式为:α=n/(n -1)(1 -∑Si2/Sx2)。(冯忠良,伍新春,姚梅林,2000)式中α为信度系数,Si为一组受考在一份试卷的项目i上的标准差,Sx为这组受考在该试卷总分上的标准差,n 为试卷项目的个数。(邹申,2005)整套试卷的信度(Cronbach alpha)为 0.91,整套试题信度接近1。信度用来检验测试分数的一致性,表征着真分数和观察分数变异性的比率。信度的范围介于0到1之间,信度越接近1,表明试卷信度越好。(余冬梅,2010)另外,题量的多少是决定信度的一个重要因素,这份试卷由81道题构成,题量相对较多,很大程度上决定了测试结果的可靠性。从评分过程来看,固定答案的题目占题目总数的99%,并采用机器阅卷,因此,评分信度高。另一方面,Alderson认为有证据表明,参加多项选择考试的学生能够学习一些应试技巧使自己的分数“人工地”提高许多。(Alderson et al,2000)此外,Hughes给多项选择列了六大弊端:第一,只考识别能力,所以不能准确测量应试者的水平;第二,分数中的猜测成分很大而且不好确定;第三,严重限制了什么能考、什么不易考;第四,设计出好的项目极为困难;第五,反拨作用往往不好——准备这种考试不是提高语言水平的最佳途径;第六,考生作弊容易。(Hughes,2000)而选词题、改错题相对更高明,原因很简单,如果我们不提供选择项,识别考试就可变成提取考试。(Gleitman,1981)但是总的来说,这套期末英语测试卷的信度比较高。
3.难度分析
难度分析是试卷分析的重要组成部分。难度指数也许是准确地反映一道题目难易程度的唯一重要特征。对受试来说,太难或太易的题目都会显示较低的信度。 题目难度是由答对的比例所决定的。难度公式是:P =∑Cr -N,P 是难度,即答对的比例,∑Cr 是答对的总数,N是受试人数。难度越高,答对的比例就越少,答错的比例就越高。因此,难易度与题目的实际难度成反比。也就是说,数值越小,难度越大。研究证明:难度范围靠近0.5是最恰当的。研究证实,比较理想的做法是把题目的难易度控制在0.3~0.7之间,0.3以下表明试题偏难,0.7以上表明试题偏易。(余冬梅,2010)通过统计发现,在60道选择题中,难度指数在0.3~0.7之间的有44道题,占73.3%,难度适中。16道题的难度指数超过0.7,占26.7%,属于偏易的题。数据表明:该份试题难易度多数控制在0.3~0.7之间,试卷难易度比例恰当。
本次试卷质量分析表明:第一,该试卷测试了考生多方面的能力水平,包括听力、词汇、语法、阅读和写作能力,其信度和效度值相对较高;第二,该试卷的客观题设计有较大问题,主要是在答案项和干扰项的设计方面;第三,该试卷70%的题区分度不高,不能有效把高分组学生和低分组学生区分开;第四,该试卷中选择题73.3 %难易度控制在0.3~0.7之间,难度适中,26.7 %的题目属于偏易的题,整体而言试卷难易度比例恰当。
[ 参 考 文 献 ]
[1] ALDERSON J C, CLAPHAM C, WALL D. Language Test Construction and Evaluation[M]. Cambridge: Cambridge University Press,1995.
[2] 余冬梅.一份英語词汇试卷的效度分析[J].牡丹江教育学院学报,2010(5).
(责任编辑 周侯辰)
[关键词]高中英语;期末试卷;质量分析
[中图分类号] G633.41 [文献标识码] A [文章编号] 1674-6058(2018)22-0042-02
试卷分析不仅是检验教学成果、帮助提高教学质量的有效方法,而且是检验试卷本身科学性、合理性的必要步骤之一。本研究以智学网所提供的学生考试成绩为参考数据,对江西省龙南中学2017年高一下学期期末英语试卷进行效度分析。智学网为用户提供更简单易用的操作系统和全面完善的资源服务,通过大数据分析充分挖掘校园考试价值,通过基于云服务的PC及移动终端综合方案为每一名教师和学生提供针对性教和个性化学的信息化环境与服务,进而有效保障了数据的精确性。研究数据是从参加考试的所有班级中随机抽取的两个班级学生的成绩,研究对象为高一即将升入高二的学生,分析报告不仅为撰写试卷分析提供参考,同时还为教师针对学生的实际能力水平做出相应调整提供了必要依据,为接下来新学期学生对学过知识的查漏补缺以及新知识的学习做好准备。
一、研究设计
1.测试对象
本研究的受试是高一即将升入高二参加期末考试的学生,从高一年级所有班级中随机抽取了两个班级,共114名学生,所有学生都完成整套试卷的作答,因此本研究有效的试卷为114份 。
2.试卷构成及其评分
本次期末试卷结构见表1,本试卷卷面总分为150分,考试时间为120分钟,总题量有81道,其中单项选择题有60道,每题给出一定选项,要求选出与题意相符合的选项。答案要求涂在答题卡上,由机器统一阅卷。非选择题有21道,其中客观题有20道,主观题有1道,一套试卷由一名教师批改打分。
二、试卷质量分析
1.效度分析
效度是指“一个测验能测出预定要测量的事物的程度”,即试卷与测试目标一致的程度。(余冬梅,2010)该试卷采取一题一考点的方式检查学生词汇知识和理解能力,针对性强。教师可以及时准确地了解学生的掌握情况和教学效果。而且题目的选项上既有三个选择项,也有四个选择项和多个选择项,这些单项选择题完全体现了语言能力测试多维性的特征。同时,试卷是按照现代统计学正态分布原理按级随机提取试题合成。以上这些都使该试卷具有较高的测试效度。
2.信度分析
考试信度是指考试结果反映考生实际水平的可信程度。计算考试信度的方法有很多种,多数方法对课程考试来说实施起来难以操作。因此,课程考试的信度测量方法一般采用克伦巴赫(Cronbach)的α系数法。α系数反映了试题间的一致性程度,具体做法是把测验分成几个部分,然后求各部分的一致性程度。计算公式为:α=n/(n -1)(1 -∑Si2/Sx2)。(冯忠良,伍新春,姚梅林,2000)式中α为信度系数,Si为一组受考在一份试卷的项目i上的标准差,Sx为这组受考在该试卷总分上的标准差,n 为试卷项目的个数。(邹申,2005)整套试卷的信度(Cronbach alpha)为 0.91,整套试题信度接近1。信度用来检验测试分数的一致性,表征着真分数和观察分数变异性的比率。信度的范围介于0到1之间,信度越接近1,表明试卷信度越好。(余冬梅,2010)另外,题量的多少是决定信度的一个重要因素,这份试卷由81道题构成,题量相对较多,很大程度上决定了测试结果的可靠性。从评分过程来看,固定答案的题目占题目总数的99%,并采用机器阅卷,因此,评分信度高。另一方面,Alderson认为有证据表明,参加多项选择考试的学生能够学习一些应试技巧使自己的分数“人工地”提高许多。(Alderson et al,2000)此外,Hughes给多项选择列了六大弊端:第一,只考识别能力,所以不能准确测量应试者的水平;第二,分数中的猜测成分很大而且不好确定;第三,严重限制了什么能考、什么不易考;第四,设计出好的项目极为困难;第五,反拨作用往往不好——准备这种考试不是提高语言水平的最佳途径;第六,考生作弊容易。(Hughes,2000)而选词题、改错题相对更高明,原因很简单,如果我们不提供选择项,识别考试就可变成提取考试。(Gleitman,1981)但是总的来说,这套期末英语测试卷的信度比较高。
3.难度分析
难度分析是试卷分析的重要组成部分。难度指数也许是准确地反映一道题目难易程度的唯一重要特征。对受试来说,太难或太易的题目都会显示较低的信度。 题目难度是由答对的比例所决定的。难度公式是:P =∑Cr -N,P 是难度,即答对的比例,∑Cr 是答对的总数,N是受试人数。难度越高,答对的比例就越少,答错的比例就越高。因此,难易度与题目的实际难度成反比。也就是说,数值越小,难度越大。研究证明:难度范围靠近0.5是最恰当的。研究证实,比较理想的做法是把题目的难易度控制在0.3~0.7之间,0.3以下表明试题偏难,0.7以上表明试题偏易。(余冬梅,2010)通过统计发现,在60道选择题中,难度指数在0.3~0.7之间的有44道题,占73.3%,难度适中。16道题的难度指数超过0.7,占26.7%,属于偏易的题。数据表明:该份试题难易度多数控制在0.3~0.7之间,试卷难易度比例恰当。
本次试卷质量分析表明:第一,该试卷测试了考生多方面的能力水平,包括听力、词汇、语法、阅读和写作能力,其信度和效度值相对较高;第二,该试卷的客观题设计有较大问题,主要是在答案项和干扰项的设计方面;第三,该试卷70%的题区分度不高,不能有效把高分组学生和低分组学生区分开;第四,该试卷中选择题73.3 %难易度控制在0.3~0.7之间,难度适中,26.7 %的题目属于偏易的题,整体而言试卷难易度比例恰当。
[ 参 考 文 献 ]
[1] ALDERSON J C, CLAPHAM C, WALL D. Language Test Construction and Evaluation[M]. Cambridge: Cambridge University Press,1995.
[2] 余冬梅.一份英語词汇试卷的效度分析[J].牡丹江教育学院学报,2010(5).
(责任编辑 周侯辰)