论文部分内容阅读
【摘 要】试卷质量分析可以从试卷的信度、效度、难度、区分度等几个方面加以衡量,SPSS在进行信度分析、效度分析、难度、区分度计算中有很高的效率。以高等数学考试试卷质量分析为例,列举了SPSS在克隆巴赫系数,Pearson积差相关法效度计算、难度、区分度计算等方面的具体应用。
【关键词】信度;效度;难度;区分度;SPSS
【中图分类号】G424.79 【文献标识码】A
【文章编号】2095-3089(2018)15-0005-01
试卷质量分析意在从考试得分、失分情况以及某些部分之间的比较、分析,发现教师命题的成功与不足之处,并针对存在问题提出改进意见,为真实、可靠地衡量学生的实际学习情况提供保证。利用SPSS对试卷的信度、效度、难度、区分度等几个方面加以测算与检验,可以对试卷的质量分析提供可靠的量化依据。
一、试卷信度分析
信度表示测量的一致性、稳定性和测量结果的可靠性。它要回答用这个测量工具在同一条件下对同一人进行测试,每次测试的结果是否相同的问题。信度包括重测信度、复本信度、同质性信度、分半信度等,常用信度系数表示,其值在0~1之间[1]。内部一致性信度估计,根据的是在单次测验中,这个测验的题目之间的相关系数的平均值。它显示了所有测验题目在多大程度上测量的是同一特质。克隆巴赫系数是最为常用的内部一致性信度的估计,其计算公式为:
〖XC15.JPG;%30%30〗
其中k为评估项目数,r〖TX-〗为k个项目相关系数的均值。a取值为0∶1(越接近1,信度越高)。
高等数学试卷SPSS信度分析操作步骤:
(1)选择[Analysis]→[Scale]→[Reliability Analysis],选择所有的题目,将所选题目移至Items框。
(2)点击Statistics,选择Scale if item deleted(项删除后的标度)。
(4)点击Continue,然后点击OK。
结果分析:
〖XC16.JPG;%35%35〗
通常a要求值至少达到0.7[2];从表1看出本试卷达到0.861,认为一致性信度较好,测试的可靠性比较高。
〖XC17.JPG;%35%35〗
从最后一列数据看出是非题删除后a值变大,信度提升为0.871。故应对是非题作相应修改。
二、试卷的效度分析
效度表示测量跟测量目的符合的程度,是测量准确性和有效性的指标。跟测验目的无关的因素影响越小,测验的有效性即效度就越高。效度分为内容效度、效标关联效度和结构效度[3]。其中效标关联效度通常以另一比较符合测量目的的测量结果作为检测效度的参照标准,通过计算测验分数与效标的相关系数来估计效标关联效度。
Pearson法SPSS效度分析操作步骤:
(1)选择[Analysis]→[Correlate]→[Bivariate],将“平时成绩”和“总成绩”拖入“Variables”中,其中“平时成绩”作为效标,分析其与“总成绩”的相关关系。
(2)选择“Correlations Coefficients”框下面的“Pearson”检验方法,计算效标“平时成绩”与“总成绩”之间的相关系数,利用积差相关法求效度。
〖XC18.JPG;%35%35〗
由表3得到平時成绩与总成绩的相关系数为0.865,说明本次考试与平时成绩的相关性强,即本次考试反映了学生的真实水平,有效性与准确性较好,符合效度要求。
三、试卷的难度分析
定量刻画被试作答一个题目所遇到的困难程度的量数称为题目的难度系数。
难度系数的计算方法有如下三种:(1)以全体被试得分率为难度系数。(2)以全体被试的通过率为难度系数。(3)以高分组与低分组被试得分率的均值为难度系数。通常高分组与低分组人数各占总人数的27%[3]。
四、试卷区分度分析
区分度又称鉴别力,是指试题对所要测量的心理特性的识别程度也就是项目的效度。主要是针对测量表或测试试卷中的单个题目的鉴别度。
计算区分度的方法有以下几种:
(1)项目鉴别指数法(高低分组法),计算公式:
〖XC19.JPG;%35%35〗
式中PH和PL分别表示高分组与低分组的通过率,XH〖TX-〗和XL〖TX-〗分别表示高分组与低分组在特定题目上的平均得分,为该题目的满分值。
(2)均值比较T检验法。
先将试卷按总分高低进行分组,利用独立样本T检验比较特定题目的高分组与低分组的均值有无显著差异,从而确定该题目的鉴别力。
(3)相关分析法——点二列相关。
该方法适用于题型为是非题,测验总分为连续变量的数据资料。
对高等数学试卷先用T检验法计算区分度
先将各题型成绩分为高分组与低分组,用独立样本T检验法检验两组的均值有无显著差异,以此判断各题型的区分度。检验结果显示除了是非题差异不显著(显著性指标大于0.05),其余题型均为差异显著(显著性指标小于0.05)。
五、结语
以上讨论了试卷质量分析的几个重要方面,结合试卷结构分析和答题情况的描述性统计可以就考试目的和试卷内容、结构、形式的合理性、适宜性、有效性和可行性等作出更为全面的评价。
参考文献
[1][美]Dimiter M.Dimitrov.心理与教育中高级研究方法与数据分析[M].北京:中国轻工业出版社,2015:22-25.
[2]杜强,贾丽艳,严先锋.SPSS统计分析从入门到精通[M].北京:人民邮电出版社,2015:43-47.
作者简介:刘欢培(1965-),男,副教授,浙江、衢州学院教师教育学院,研究方向:应用统计。
【关键词】信度;效度;难度;区分度;SPSS
【中图分类号】G424.79 【文献标识码】A
【文章编号】2095-3089(2018)15-0005-01
试卷质量分析意在从考试得分、失分情况以及某些部分之间的比较、分析,发现教师命题的成功与不足之处,并针对存在问题提出改进意见,为真实、可靠地衡量学生的实际学习情况提供保证。利用SPSS对试卷的信度、效度、难度、区分度等几个方面加以测算与检验,可以对试卷的质量分析提供可靠的量化依据。
一、试卷信度分析
信度表示测量的一致性、稳定性和测量结果的可靠性。它要回答用这个测量工具在同一条件下对同一人进行测试,每次测试的结果是否相同的问题。信度包括重测信度、复本信度、同质性信度、分半信度等,常用信度系数表示,其值在0~1之间[1]。内部一致性信度估计,根据的是在单次测验中,这个测验的题目之间的相关系数的平均值。它显示了所有测验题目在多大程度上测量的是同一特质。克隆巴赫系数是最为常用的内部一致性信度的估计,其计算公式为:
〖XC15.JPG;%30%30〗
其中k为评估项目数,r〖TX-〗为k个项目相关系数的均值。a取值为0∶1(越接近1,信度越高)。
高等数学试卷SPSS信度分析操作步骤:
(1)选择[Analysis]→[Scale]→[Reliability Analysis],选择所有的题目,将所选题目移至Items框。
(2)点击Statistics,选择Scale if item deleted(项删除后的标度)。
(4)点击Continue,然后点击OK。
结果分析:
〖XC16.JPG;%35%35〗
通常a要求值至少达到0.7[2];从表1看出本试卷达到0.861,认为一致性信度较好,测试的可靠性比较高。
〖XC17.JPG;%35%35〗
从最后一列数据看出是非题删除后a值变大,信度提升为0.871。故应对是非题作相应修改。
二、试卷的效度分析
效度表示测量跟测量目的符合的程度,是测量准确性和有效性的指标。跟测验目的无关的因素影响越小,测验的有效性即效度就越高。效度分为内容效度、效标关联效度和结构效度[3]。其中效标关联效度通常以另一比较符合测量目的的测量结果作为检测效度的参照标准,通过计算测验分数与效标的相关系数来估计效标关联效度。
Pearson法SPSS效度分析操作步骤:
(1)选择[Analysis]→[Correlate]→[Bivariate],将“平时成绩”和“总成绩”拖入“Variables”中,其中“平时成绩”作为效标,分析其与“总成绩”的相关关系。
(2)选择“Correlations Coefficients”框下面的“Pearson”检验方法,计算效标“平时成绩”与“总成绩”之间的相关系数,利用积差相关法求效度。
〖XC18.JPG;%35%35〗
由表3得到平時成绩与总成绩的相关系数为0.865,说明本次考试与平时成绩的相关性强,即本次考试反映了学生的真实水平,有效性与准确性较好,符合效度要求。
三、试卷的难度分析
定量刻画被试作答一个题目所遇到的困难程度的量数称为题目的难度系数。
难度系数的计算方法有如下三种:(1)以全体被试得分率为难度系数。(2)以全体被试的通过率为难度系数。(3)以高分组与低分组被试得分率的均值为难度系数。通常高分组与低分组人数各占总人数的27%[3]。
四、试卷区分度分析
区分度又称鉴别力,是指试题对所要测量的心理特性的识别程度也就是项目的效度。主要是针对测量表或测试试卷中的单个题目的鉴别度。
计算区分度的方法有以下几种:
(1)项目鉴别指数法(高低分组法),计算公式:
〖XC19.JPG;%35%35〗
式中PH和PL分别表示高分组与低分组的通过率,XH〖TX-〗和XL〖TX-〗分别表示高分组与低分组在特定题目上的平均得分,为该题目的满分值。
(2)均值比较T检验法。
先将试卷按总分高低进行分组,利用独立样本T检验比较特定题目的高分组与低分组的均值有无显著差异,从而确定该题目的鉴别力。
(3)相关分析法——点二列相关。
该方法适用于题型为是非题,测验总分为连续变量的数据资料。
对高等数学试卷先用T检验法计算区分度
先将各题型成绩分为高分组与低分组,用独立样本T检验法检验两组的均值有无显著差异,以此判断各题型的区分度。检验结果显示除了是非题差异不显著(显著性指标大于0.05),其余题型均为差异显著(显著性指标小于0.05)。
五、结语
以上讨论了试卷质量分析的几个重要方面,结合试卷结构分析和答题情况的描述性统计可以就考试目的和试卷内容、结构、形式的合理性、适宜性、有效性和可行性等作出更为全面的评价。
参考文献
[1][美]Dimiter M.Dimitrov.心理与教育中高级研究方法与数据分析[M].北京:中国轻工业出版社,2015:22-25.
[2]杜强,贾丽艳,严先锋.SPSS统计分析从入门到精通[M].北京:人民邮电出版社,2015:43-47.
作者简介:刘欢培(1965-),男,副教授,浙江、衢州学院教师教育学院,研究方向:应用统计。