论文部分内容阅读
摘 要:2012年1月,美国农村学校与社区信托组织发布了《为何农村事关重大(2011-12)》报告,通过5个分类指标和25个独立指标,全面描述了美国50个州的农村教育状况及政策绩效。作为一项农村基础教育质量的评估策略,该报告呈现出以下特点:构建了“条件—过程—结果”三位一体的指标体系;形成了“点”“线”“面”三维空间的评估模式;强调了绩效问责和质量改善的评估理念。
关键词:农村基础教育;评估策略;指标体系
2012年1月,美国农村学校与社区信托组织(Rural School and Community Trust)发布了《为何农村事关重大(2011-2012)》(Why Rural Matters 2011-2012)报告,通过5个分类指标和25个独立指标,全面描述并分析了美国50个州的农村教育状况。这是自2000年以来,美国农村学校与社区信托组织对外正式公布的第6份评估报告,其系统的评估指标体系、科学的评估方法、先进的评估理念值得我们学习和借鉴。
一、评估背景
农村基础教育质量改进运动是美国城市化和工业化进程的必然结果。尽管多年来美国政府一直致力于通过多种途径提升农村学校的教育质量,缩小城乡之间的教育差距,如大规模的农村学校布局调整、资金优先投入政策、农村教师援助项目等,但城乡教育不均衡至今仍是美国教育面临的重要现实问题。自2000年以来,美国农村学校与社区信托组织连续发布了5份主题为《为何农村事关重大》的评估报告①,结果显示:一方面,随着美国农村城市化步伐的加快,农村的经济、环境与人口状况随之发生了重大改变,农村基础教育面临着新的问题和挑战;另一方面,由于农村教育现实问题的复杂性及影响因素的多元性,政策制定者难以对农村教育状况进行全面的把握和深刻的判断,现有政策很难从根本上提升农村基础教育的质量。在此背景下,美国农村学校与社区信托组织发布的第6份农村教育评估报告《为何农村事关重大(2011-2012)》,在修改完善原有报告指标体系的基础上,首次加入了纵向指标,加大“结果指标”(政策绩效指标和学生学业成就指标)比重,目的是全面描述美国50个州农村基础教育质量提升的现状和效果,揭示各州农村教育所面临的复杂性和多元性挑战,帮助决策者更加科学地制定具有针对性的政策方案,提升农村学校的教育质量[1]。相对前5份报告,《为何农村事关重大(2011-2012)》的评估体系更为成熟,研究方法也更为完善。该报告公布后立即引起了美国政府与社会各界的积极响应,也为我们了解美国农村基础教育质量问题的政策绩效和评估策略提供了一个难得的分析蓝本。
二、评估策略
(一)指标的改进
《为何农村事关重大(2011-2012)》报告共包括5个分类指标和25个独立指标。5个分类指标分别是:重要性指标(importance)、学生及家庭多元性指标(student and family diversity)、教育政策成效指标(policy outcomes)、学生学业成绩指标(educational outcomes)、纵向指标(longitudinal gauge)。相对于以往的评估报告,新报告的指标体系有了明显的改进,主要体现在两个方面:
第一,在分类指标方面,新加入了一组发展性指标,即“纵向指标”,并以此替代了先前指标体系中的“贫困度指标”。所谓纵向指标,就是强调相关核心指标的历史发展和变化趋势,如农村学生人数的历史发展趋势以及少数族裔的学生在农村学生人数中所占比例的年度变化趋势等。从促进改善和发展的角度看,对某个指标进行比较时,将以往的成就水平作为参照系,是一种更为合理的做法。加入纵向指标有利于观察各项教育指标的动态变化过程和发展趋势,可以从时间维度上评测教育的发展情况和教育政策的执行效果。
第二,在独立指标方面,加大了结果性指标的比重,增强评估结果对现实问题的驱动力。比如说,在新报告的“教育政策成效指标”分类指标下的独立指标就有一个重要的调整改变,即用“州财政收入发放到地方学校的一美元的衡量指数”替代了之前的“州政府与地方政府的生均教育经费支出差距”,减少了用性质单一的描述性指标来衡量政策的成效,而是用一美元的衡量指数将客观困难指标与主观政策成效指标结合起来,综合评价了教育经费政策的绩效。再比如,在“学生学业成绩指标”中,主要变化是,将之前采用的《不让一个孩子掉队法》测评的数学、阅读的综合成绩,改为国家教育进步评价项目(NAEP)测评的四年级和八年级的数学、阅读分科成绩。其目的是为了避免各州为迎合《不让一个孩子掉队法》的要求,降低各自的学业标准,从而造成全国标准不统一的问题。采用NAEP的分科成绩就是为了达到全国统一的学业标准,实现具有一定“学术内涵”的评估标准,以此衡量农村基础教育的质量。此外,《为何农村事关重大(2011-2012)》针对其他的指标也进行了诸多改进,具体情况如表1所示。[2]
(二)指标的计算与排名
1.独立指标的计算与排名
《为何农村事关重大(2011-2012)》系列调查报告的一大亮点就是利用“权威数据”对所涉及的5个分类指标展开全景扫描。所谓“权威数据”,就是指各种渠道的官方统计数据,如美国教育部、国家教育统计中心(National Center for Education Statistics,NCES)、美国人口普查局(U.S Census Bureau)等机构的相关数据。第6份报告对5个分类指标所涉及的25个独立指标,以州为单位进行1~50范围内的全国排名,目的是为了显示在某一个点上各州的农村基础教育状况。以“小型学校占农村公立学校比例”指标的评测排名为例,该指标是为了反映农村学校中学生数低于美国所有学校平均学生数(537人)的学校比例,比例越大,排名越高,说明该州在小型学校问题方面面临的问题就越严重,越需要得到足够的重视。 2.分类指标的综合排名
为了将不同类别的各个独立指标的评估结果综合起来,呈现某一类评估指标下各州农村教育的状况,《为何农村事关重大(2011-2012)》在完成同一类指标的5个独立指标的计算排名后,接着算出此5个独立指标排名的平均数,然后把得到的平均数以升序方式排列,得出各州在同一类指标评估的全国排名,目的是为了将其呈现在某一条线上,如在“农村学生及其家庭的多元性”这一条线上各州农村教育状况。排名越高,说明该州农村教育问题在相应方面面临的困难越大,政策成效就越小,或改善的状况就越差。以“教育重要性”指标为例,该指标的综合排名就是在计算了其涵盖的5个独立指标排名的平均数后得出的结果。如表2所示,综合排名越高的州,表明在农村学生人数,小规模学校等方面面临的问题就越大,政策改善的情况就越差,就需要投入更大的努力。[3]
3.教育优先度排名
优先度排名,即将5个分类指标的排名数继续平均,平均数按照从小到大的顺序排列,得出各州农村基础教育的全国综合排名。目的是为了全方位地呈现在整个面上各州农村教育的状况。排名越高,说明该州的农村教育状况越糟糕,就越需要优先考虑。例如,教育重要性和教育政策绩效,纵向比较3类指标的优先排名,依照程度高低分为“引起注意”“严重”“非常严重”“及其严重”4个程度。《为何农村事关重大(2011-2012)》在把5个分类指标的综合排名分数平均后,得出最终的教育优先度排名情况,具体如表3所示。[4]
三、评估特点
(一)构建“条件—过程—结果”三位一体的指标体系
如前所述,《为何农村事关重大(2011-2012)》系列评估报告的完成是个不断改进和完善的过程。从最初的评估指标体系的设计来看,报告重点描述的是农村基础教育的条件性指标和过程性指标,这样就会造成基于条件和过程指标的评估与基于结果的评估相脱离,削弱了评估结果对于问题改善和政策驱动的力度。《为何农村事关重大(2011-2012)》在反思之前工作的基础上,重新审视指标体系的构建,加大了“结果性指标”的比重,将学生学业成绩指标和教育政策绩效指标作为重要的评估指标,构建了“条件性指标—过程性指标—结果性指标”三位一体的指标体系。换言之,农村学校与社区信托组织构建的是一种新的教育评估范式,其结果性指标既包括学生的学业成绩,也涉及政策制定者能够控制且影响成绩的结构性因素[5]。这种评估体系的优点是:一方面,改善了以往评估报告只停留于简单的“数据汇总”和“信息公开”的层面,促使《为何农村事关重大(2011-2012)》系列评估成为信息反馈、政策调整的策略和手段;另一方面,通过加大结果性指标的比重,促使教育质量提升问题成为教育评估的主要内容,并使政府对各州农村基础教育质量的问责成为可能。
(二)形成“点”“线”“面”三维空间的评估模式
农村学校与社区信托基金会的农村教育指标体系不仅包括农村教育自身的指标,还包括涉及农村经济、社会发展方面的指标,表明了该指标体系设计的全面性[6]。与此相应,《为何农村事关重大(2011-2012)》在评估策略上形成了一种“点”“线”“面”的模式,即独立性指标排名、分类指标排名、教育优先度排名三维立体的评估方法。具体的实践策略是:首先展示25个独立指标的排名情况,说明各州在不同点上的教育情况;其次呈现5个分类指标的综合排名,反映各州在某一条线上的农村基础教育状况;最后将5个分类指标的排名数继续平均,在整个面上呈现各州农村教育的状况。这样做一方面是能够全方位体现评估对象的趋势和特征,避免传统评估以偏概全的不足;另一方面,能够更加深刻地反映农村教育的复杂性和多样性,依照各州情况的不同展现问题的具体层面和差异性,帮助相关利益主体清晰认识到问题的症结所在,对于工作的改进及政策的调整都有所裨益。
(三)体现绩效问责和质量改善的评估理念
《为何农村事关重大(2011-2012)》报告的评估指标体系通过三维空间的指标来全面反映美国各州农村基础教育的投入和产出,评估的目的在于促进农村教育质量提升。对于《为何农村事关重大(2011-2012)》报告的评估,重要的不是提供信息,而是对信息的解释和后续的改进、运用,发挥信息对农村教育测评和改进的双重功能。《为何农村事关重大(2011-2012)》不仅从以数据信息为基础展现了美国各州农村教育的状况,而且还对相关的各种数据以及不同州所面临的不同情况与挑战进行了详尽深入的分析,并在此基础上提出相应的改进方向与建议,体现了一种绩效问责的先进评估理念。因为如果评估的结果不能导致相关利益主体后续的改善行动,那么为之投入的时间、金钱和努力都是不值得的[7]。作为政府对农村教育质量问责的一个重要环节,美国农村学校与社区信托组织所体现出的先进的绩效理念,值得我们认真学习和借鉴。
注释:
① 即《为何农村事关重大(2000)》《为何农村事关重大(2003)》《为何农村事关重大(2005)》《为何农村事关重大(2007)》《为何农村事关重大(2009)》。
参考文献:
[1][2][3][4]Rural School and Community Trust. Why Rural Matters 2011-12[EB/OL]. http://files.ruraledu.org/wrm2011-12/WRM 2011-12.pdf,2012-10-31.
[5][6]邬志辉,马青. 美国农村学校与社区信托基金会的农村教育指标体系及启示[J]. 外国教育研究, 2008(3):29-34.
[7]Gale, F.G.
关键词:农村基础教育;评估策略;指标体系
2012年1月,美国农村学校与社区信托组织(Rural School and Community Trust)发布了《为何农村事关重大(2011-2012)》(Why Rural Matters 2011-2012)报告,通过5个分类指标和25个独立指标,全面描述并分析了美国50个州的农村教育状况。这是自2000年以来,美国农村学校与社区信托组织对外正式公布的第6份评估报告,其系统的评估指标体系、科学的评估方法、先进的评估理念值得我们学习和借鉴。
一、评估背景
农村基础教育质量改进运动是美国城市化和工业化进程的必然结果。尽管多年来美国政府一直致力于通过多种途径提升农村学校的教育质量,缩小城乡之间的教育差距,如大规模的农村学校布局调整、资金优先投入政策、农村教师援助项目等,但城乡教育不均衡至今仍是美国教育面临的重要现实问题。自2000年以来,美国农村学校与社区信托组织连续发布了5份主题为《为何农村事关重大》的评估报告①,结果显示:一方面,随着美国农村城市化步伐的加快,农村的经济、环境与人口状况随之发生了重大改变,农村基础教育面临着新的问题和挑战;另一方面,由于农村教育现实问题的复杂性及影响因素的多元性,政策制定者难以对农村教育状况进行全面的把握和深刻的判断,现有政策很难从根本上提升农村基础教育的质量。在此背景下,美国农村学校与社区信托组织发布的第6份农村教育评估报告《为何农村事关重大(2011-2012)》,在修改完善原有报告指标体系的基础上,首次加入了纵向指标,加大“结果指标”(政策绩效指标和学生学业成就指标)比重,目的是全面描述美国50个州农村基础教育质量提升的现状和效果,揭示各州农村教育所面临的复杂性和多元性挑战,帮助决策者更加科学地制定具有针对性的政策方案,提升农村学校的教育质量[1]。相对前5份报告,《为何农村事关重大(2011-2012)》的评估体系更为成熟,研究方法也更为完善。该报告公布后立即引起了美国政府与社会各界的积极响应,也为我们了解美国农村基础教育质量问题的政策绩效和评估策略提供了一个难得的分析蓝本。
二、评估策略
(一)指标的改进
《为何农村事关重大(2011-2012)》报告共包括5个分类指标和25个独立指标。5个分类指标分别是:重要性指标(importance)、学生及家庭多元性指标(student and family diversity)、教育政策成效指标(policy outcomes)、学生学业成绩指标(educational outcomes)、纵向指标(longitudinal gauge)。相对于以往的评估报告,新报告的指标体系有了明显的改进,主要体现在两个方面:
第一,在分类指标方面,新加入了一组发展性指标,即“纵向指标”,并以此替代了先前指标体系中的“贫困度指标”。所谓纵向指标,就是强调相关核心指标的历史发展和变化趋势,如农村学生人数的历史发展趋势以及少数族裔的学生在农村学生人数中所占比例的年度变化趋势等。从促进改善和发展的角度看,对某个指标进行比较时,将以往的成就水平作为参照系,是一种更为合理的做法。加入纵向指标有利于观察各项教育指标的动态变化过程和发展趋势,可以从时间维度上评测教育的发展情况和教育政策的执行效果。
第二,在独立指标方面,加大了结果性指标的比重,增强评估结果对现实问题的驱动力。比如说,在新报告的“教育政策成效指标”分类指标下的独立指标就有一个重要的调整改变,即用“州财政收入发放到地方学校的一美元的衡量指数”替代了之前的“州政府与地方政府的生均教育经费支出差距”,减少了用性质单一的描述性指标来衡量政策的成效,而是用一美元的衡量指数将客观困难指标与主观政策成效指标结合起来,综合评价了教育经费政策的绩效。再比如,在“学生学业成绩指标”中,主要变化是,将之前采用的《不让一个孩子掉队法》测评的数学、阅读的综合成绩,改为国家教育进步评价项目(NAEP)测评的四年级和八年级的数学、阅读分科成绩。其目的是为了避免各州为迎合《不让一个孩子掉队法》的要求,降低各自的学业标准,从而造成全国标准不统一的问题。采用NAEP的分科成绩就是为了达到全国统一的学业标准,实现具有一定“学术内涵”的评估标准,以此衡量农村基础教育的质量。此外,《为何农村事关重大(2011-2012)》针对其他的指标也进行了诸多改进,具体情况如表1所示。[2]
(二)指标的计算与排名
1.独立指标的计算与排名
《为何农村事关重大(2011-2012)》系列调查报告的一大亮点就是利用“权威数据”对所涉及的5个分类指标展开全景扫描。所谓“权威数据”,就是指各种渠道的官方统计数据,如美国教育部、国家教育统计中心(National Center for Education Statistics,NCES)、美国人口普查局(U.S Census Bureau)等机构的相关数据。第6份报告对5个分类指标所涉及的25个独立指标,以州为单位进行1~50范围内的全国排名,目的是为了显示在某一个点上各州的农村基础教育状况。以“小型学校占农村公立学校比例”指标的评测排名为例,该指标是为了反映农村学校中学生数低于美国所有学校平均学生数(537人)的学校比例,比例越大,排名越高,说明该州在小型学校问题方面面临的问题就越严重,越需要得到足够的重视。 2.分类指标的综合排名
为了将不同类别的各个独立指标的评估结果综合起来,呈现某一类评估指标下各州农村教育的状况,《为何农村事关重大(2011-2012)》在完成同一类指标的5个独立指标的计算排名后,接着算出此5个独立指标排名的平均数,然后把得到的平均数以升序方式排列,得出各州在同一类指标评估的全国排名,目的是为了将其呈现在某一条线上,如在“农村学生及其家庭的多元性”这一条线上各州农村教育状况。排名越高,说明该州农村教育问题在相应方面面临的困难越大,政策成效就越小,或改善的状况就越差。以“教育重要性”指标为例,该指标的综合排名就是在计算了其涵盖的5个独立指标排名的平均数后得出的结果。如表2所示,综合排名越高的州,表明在农村学生人数,小规模学校等方面面临的问题就越大,政策改善的情况就越差,就需要投入更大的努力。[3]
3.教育优先度排名
优先度排名,即将5个分类指标的排名数继续平均,平均数按照从小到大的顺序排列,得出各州农村基础教育的全国综合排名。目的是为了全方位地呈现在整个面上各州农村教育的状况。排名越高,说明该州的农村教育状况越糟糕,就越需要优先考虑。例如,教育重要性和教育政策绩效,纵向比较3类指标的优先排名,依照程度高低分为“引起注意”“严重”“非常严重”“及其严重”4个程度。《为何农村事关重大(2011-2012)》在把5个分类指标的综合排名分数平均后,得出最终的教育优先度排名情况,具体如表3所示。[4]
三、评估特点
(一)构建“条件—过程—结果”三位一体的指标体系
如前所述,《为何农村事关重大(2011-2012)》系列评估报告的完成是个不断改进和完善的过程。从最初的评估指标体系的设计来看,报告重点描述的是农村基础教育的条件性指标和过程性指标,这样就会造成基于条件和过程指标的评估与基于结果的评估相脱离,削弱了评估结果对于问题改善和政策驱动的力度。《为何农村事关重大(2011-2012)》在反思之前工作的基础上,重新审视指标体系的构建,加大了“结果性指标”的比重,将学生学业成绩指标和教育政策绩效指标作为重要的评估指标,构建了“条件性指标—过程性指标—结果性指标”三位一体的指标体系。换言之,农村学校与社区信托组织构建的是一种新的教育评估范式,其结果性指标既包括学生的学业成绩,也涉及政策制定者能够控制且影响成绩的结构性因素[5]。这种评估体系的优点是:一方面,改善了以往评估报告只停留于简单的“数据汇总”和“信息公开”的层面,促使《为何农村事关重大(2011-2012)》系列评估成为信息反馈、政策调整的策略和手段;另一方面,通过加大结果性指标的比重,促使教育质量提升问题成为教育评估的主要内容,并使政府对各州农村基础教育质量的问责成为可能。
(二)形成“点”“线”“面”三维空间的评估模式
农村学校与社区信托基金会的农村教育指标体系不仅包括农村教育自身的指标,还包括涉及农村经济、社会发展方面的指标,表明了该指标体系设计的全面性[6]。与此相应,《为何农村事关重大(2011-2012)》在评估策略上形成了一种“点”“线”“面”的模式,即独立性指标排名、分类指标排名、教育优先度排名三维立体的评估方法。具体的实践策略是:首先展示25个独立指标的排名情况,说明各州在不同点上的教育情况;其次呈现5个分类指标的综合排名,反映各州在某一条线上的农村基础教育状况;最后将5个分类指标的排名数继续平均,在整个面上呈现各州农村教育的状况。这样做一方面是能够全方位体现评估对象的趋势和特征,避免传统评估以偏概全的不足;另一方面,能够更加深刻地反映农村教育的复杂性和多样性,依照各州情况的不同展现问题的具体层面和差异性,帮助相关利益主体清晰认识到问题的症结所在,对于工作的改进及政策的调整都有所裨益。
(三)体现绩效问责和质量改善的评估理念
《为何农村事关重大(2011-2012)》报告的评估指标体系通过三维空间的指标来全面反映美国各州农村基础教育的投入和产出,评估的目的在于促进农村教育质量提升。对于《为何农村事关重大(2011-2012)》报告的评估,重要的不是提供信息,而是对信息的解释和后续的改进、运用,发挥信息对农村教育测评和改进的双重功能。《为何农村事关重大(2011-2012)》不仅从以数据信息为基础展现了美国各州农村教育的状况,而且还对相关的各种数据以及不同州所面临的不同情况与挑战进行了详尽深入的分析,并在此基础上提出相应的改进方向与建议,体现了一种绩效问责的先进评估理念。因为如果评估的结果不能导致相关利益主体后续的改善行动,那么为之投入的时间、金钱和努力都是不值得的[7]。作为政府对农村教育质量问责的一个重要环节,美国农村学校与社区信托组织所体现出的先进的绩效理念,值得我们认真学习和借鉴。
注释:
① 即《为何农村事关重大(2000)》《为何农村事关重大(2003)》《为何农村事关重大(2005)》《为何农村事关重大(2007)》《为何农村事关重大(2009)》。
参考文献:
[1][2][3][4]Rural School and Community Trust. Why Rural Matters 2011-12[EB/OL]. http://files.ruraledu.org/wrm2011-12/WRM 2011-12.pdf,2012-10-31.
[5][6]邬志辉,马青. 美国农村学校与社区信托基金会的农村教育指标体系及启示[J]. 外国教育研究, 2008(3):29-34.
[7]Gale, F.G.