论文部分内容阅读
摘 要：二战后，全球在对发展中国家的教育援助方面取得了举世瞩目的成就。与此同样重要的是，用于教育的援助必须要促成伙伴国家或政府的积极改革行动，才能实现教育援助的可持续发展，而能力建设则是实现这一目标的先决条件。东南非洲教育质量监测联盟正是在国际教育援助下成长起来的重要的国际组织，分析其发展经验，对能力建设视野下的国际教育援助具有较高的借鉴价值，同时对我国的基础教育质量监控研究也有一定的参考意义。
关键词：国际教育援助；教育改革；东南非洲教育质量监测联盟；能力建设
非洲基础教育并不是落后的代名词。在联合国教科文组织国际教育规划研究所等国际非营利组织的大力支持下，经过近20年的发展，东南非洲教育质量监测联盟（the Southern and Eastern Africa Consortium for Monitoring Educational Quality，SACMEQ）所开展的基础教育质量监测评估项目已经成为在非洲开展的具有重要国际影响力的评估项目之一①。2004年，因为其出色的工作成绩和地区影响，SACMEQ被联合国教科文组织国际教育局授予夸美纽斯奖章。本文期望通过对SACMEQ发展历程和监测实施过程的考察，对国际基础教育改革的推进和我国基础教育质量监测体系的建设有所启示。
一、发展历程
1991-1992年，东南非洲教育质量监测还只是国际教育规划研究所发起的一个小型研究项目，只在一个国家（津巴布韦）开展研究。2000-2010年，它已经发展成为东南部非洲教育部长之间重要而有力的工作网络。1995年，SACMEQ正式成立，有7个成员国，分别是肯尼亚、马拉维、毛里求斯、纳米比亚、坦桑尼亚、赞比亚和津巴布韦。1997年，SACMEQ正式注册成为一个独立的非政府机构，拥有15个成员国——除了上述提到的7个成员国之外，还有博茨瓦纳、莱索托、莫桑比克、塞舌尔、南非、斯维茨兰、乌干达、坦桑尼亚（内陆和桑给巴尔）。
纵观SACMEQ的发展历程，它的每一个发展阶段都伴随着与国际教育规划研究所之间合作形式的重大转变——国际教育规划研究所逐渐减少对SACMEQ的研究和培训方向的干预，转而注重其自身能力建设，直至其能独立开展相应的基础教育质量监测研究。在第一阶段（1989-1994年），国际教育规划研究所是津巴布韦实验研究的发起者，与津巴布韦教育部共同研究有关津巴布韦的教育条件和教育质量问题，开展试验性的研究和培训项目。在第二阶段（1995-1998年），国际教育规划研究所作为一个促进者推动SACMEQ I项目的展开——有7个国家的教育部参与，涉及南部非洲的约1000所小学、20000名学生和2000名教师，主要监测阅读领域教育质量。在第三阶段（1999-2004年），国际教育规划研究所作为一个外在的帮助者，协助SACMEQ II项目的展开——有14个国家的教育部参与，涉及东南非洲的约2300所小学、40000名学生和5300名教师，主要监测阅读和数学领域教育质量。需要指出的是，在本阶段结束前，国际教育规划研究所都处在掌控地位。在第四阶段（2005-2009年），国际教育规划研究所作为外在的帮助者之一，协助SACMEQ III项目的展开——有15个国家的教育部参与，涉及东南非洲的约2800所小学和初中、60000名学生、8000名教师和2800名校长。在这一阶段，作为对非洲教育改革的推进，项目还涉及了对艾滋病预防教育的研究。值得注意的是，这一项目主要由SACMEQ的协调中心主持完成。在第五阶段（2010年至今），作为始终的伙伴，国际教育规划研究所把各国自身研究和培训能力的提升放在了首位。在这一阶段，除了延续SACMEQ III项目以外，SACMEQ自2012年开始自行组织SACMEQⅣ项目的研究工作。[1]
1995-1998年间，由于没有常设机构和办公地，项目的运作主要由国际教育规划研究所主持，由它开展定期的工作坊培训，培训各国的国家研究协调员完成项目要求的质量监控工作。1998年，这一情况有所改善，SACMEQ设立了一个协调员办公室，之后又在津巴布韦联合国教科文组织哈拉雷地区办公室（UNESCO’s Harare Cluster Office in Zimbabwe）设立了SACMEQ数据处理办公室。
2006年，赞比亚政府正式将SACMEQ注册为“以东南非洲各国教育部长为成员的国际非营利组织”。2007年，在国际教育规划研究所的努力下，SACMEQ的研究和培训工作得到了一些经费支持。2008-2009年间，SACMEQ在巴黎设立了临时的协调中心。2010年，SACMEQ协调中心重回非洲，主要由教育部长联席会负责具体的事务。
二、管理与运行机制
SACMEQ的管理与运行主要由该联盟的教育部长联席会、协调中心、管理委员会负责，由作为合作伙伴及外在援助者的国际教育规划研究所协助。概括来说，教育部长联席会负责明确研究方向，制定总体政策；协调中心与合作者一起为具体合作领域争取资金，并提供技术支持；管理委员会负责为各地的协调中心提供运作和经费方面的帮助，它是教育部长联席会的分委员会，每年开一次会议，并根据需要召开咨询会议。具体的管理与运行机制如下：[2]
第一，教育部长联席会。每个教育部长都要管理自己国内的SACMEQ研究活动。例如，任命本国的SACMEQ研究协调员，与课程和评价研究专家共同审核测验和编制问卷，对数据收集等工作进行培训，支付本国SACMEQ项目费用，分担整个SACMEQ项目费用。
第二，协调中心。协调中心负责SACMEQ的日常工作安排，中心工作人员由SACMEQ协调中心主任和数据处理管理员（Data Processing Manager）组成。SACMEQ协调中心负责为成员国的研究协调员及其工作提供管理和技术支持。同时，它还与合作机构一起努力为SACMEQ的研究项目和培训项目争取经费。此类项目经费支出包括工作坊培训、取样和测量的经费投入、购买和开发满足样本取样和数据分析以及数据清理需要的软件、设计制作技术和实地操作手册、SACMEQ的科学与测量委员会的会议支出等。 第三，国家研究协调员。SACMEQ的国家研究协调员来自各国不同部门，目的在于更好地开发各个成员国的人力资源，而不是为了单纯提供各种数据和指标。例如，博茨瓦纳、莱索托、马拉维、斯维茨兰、坦桑尼亚、乌干达、赞比亚、津巴布韦等国的研究协调员就来自于这些国家的规划部门；肯尼亚的研究协调员来自于该国考试中心；毛里求斯的研究协调员来自于该国人力资源部；莫桑比克的研究协调员来自于该国国家教育发展研究所；塞舌尔、坦桑尼亚（大陆）的研究协调员来自于秘书长办公室；南非的研究协调员来自于国家质量保障局。国家研究协调员与副协调员的工作开展需要得到来自本国相关人员的支持，尤其是在数据收集、录入等操作中更是如此。例如，在第三阶段研究的数据收集阶段，各国一共培训了2250名数据收集员，然后3人一组实地访问了大约2800所学校。
第四，合作伙伴与外在援助。国际教育规划研究所对SACMEQ的研究至关重要——它直接为SACMEQ的协调中心和国家研究协调员提供培训与技术支持。此外，除了国际教育成就评价协会等国际组织，还有肯尼亚的Aga Khan基金会、马拉维的国家教育研究与培训中心等各国相关组织与机构都在上述领域发挥了重要作用。
三、研究的准备与实施
（一）集中培训与工作坊培训
集中培训和工作坊培训是国际教育规划研究所等国际组织推动SACMEQ健康发展和自身能力建设的重要途径，也是SACMEQ不可或缺的组成部分。
1.集中培训
2005年，为了保障SACMEQ能顺利地独立开展第三阶段的研究，国际教育规划研究所集合了一批在国际教育研究领域有重要影响力的专家对SACMEQ的研究进行了10次专题培训。这10次的培训主题分别是：教育研究的基本概念与术语、从教育政策议题到具体的研究问题与研究设计、教育调查研究的抽样设计、以实验和调查为基础总结教育研究、测验与考试的试题编写、测验编制的审核、测验编制中的试测与题目分析、问卷设计、数据分析、数据准备和管理。
2.工作坊培训
自1992年起，SACMEQ每年至少举行一次面对面的工作坊培训。每一次培训都集中于某一项直接应用于研究的核心技能，如计算机辅助的学生成就水平分析，运用经典项目分析和项目反映理论来编制及改进语言和数学学科的测验，计算机辅助的调查取样和大规模的教育质量研究的数据管理等。工作坊培训是由大规模调查研究领域的世界一流专家主持的。如果国家研究协调员掌握了足够的相关技能，他们自己也可以成为培训者。例如，2002年，一个研究协调员小组与国际教育规划研究所的专家一起为马拉维的教育官员进行了有关数据收集与分析方面的专门培训。[3]
（二）监测工作的实施
SACMEQ监测的焦点是15个成员国基础教育系统中的学校教育条件和教育质量。以SACMEQ III项目为例，其主要目的是监测总体的学校教育条件、六年级学生和教师的阅读与数学学业成就水平、学生和教师对艾滋病防治知识的掌握程度等信息。监测工作的实施主要包括如下四个阶段。
第一，在制定监测框架后，确定监测项目，并由各国教育部门决策者确定本国学生需要达到的基本水平标准。SACMEQ运用纳什量表来展现学生的阅读和数学成绩，以及不同水平的能力的提高程度。这种方法不再是用合格或不合格两个标准来评价教师和学生的表现，而是从易到难，用8个水平标准来表示阅读和数学成绩。例如，阅读的最低水平是前阅读（pre reading），最高水平是批判式阅读（critical reading）。这种新式方法不仅可以较为精确地展示教育质量，还可以确定教师和学生今后的关注重点。
第二，协调中心集合各领域专家对以前的试题和新编制的试题进行审查，确定试题的信度和效度，并进行先导性的测验，然后确定测验是否可行，并翻译成不同的语言版本。
第三，在整体监测工作开始前，进行为期三天的数据收集员培训，只有经过培训并达到合格标准的数据收集员才能进入学校开展相应的工作。同时，提前通知各所学校，为学生、教师和校长提供测验手册。数据收集员严格按照测验手册的要求进行施测，然后按照编制好的软件录入和清理所有的数据（data cleaning）并进行数据分析。
第四，在数据分析工作结束后，研究人员和教育决策者共同完成了两份工作报告：《学生学业评价结果》《学校资源的发展水平和趋势》。然后，根据工作报告和地区研究总结继续进行深度研究，形成了七份政策报告：《阅读和数学的学业成就处在何种水平》《艾滋病防治教育的成效》《阅读和数学成绩中的性别差异是否缩小》《留级的程度与趋势》《教科书发放项目的成效》《学校不同学科教师的薪资差异》《学校领导岗位中的性别比例是否平衡》。
值得注意的是，为了使研究报告更为通俗易懂，而不是局限于专业人员才能看懂，SACMEQ研究报告在写作形式上强调研究结果的“可视化”，而非通过大量的数据、表格展现研究成果。例如，SACMEQ采用了条线图、多维趋势图以及特别研制的“数据地球交互可视系统”（StatPlanet interactive visualization system）来直观地呈现数据分析结果和研究结论。[4]
四、特色与经验
很多政府部门、大学和研究机构都在发展中国家开展过与教育质量评估和监测有关的研究。然而，此类研究得出的研究报告很少能够引起教育部门决策者的关注。而由SACMEQ发布的教育政策报告对很多国家及其教育部门决策者都有着持续的影响。同样地，SACMEQ高质量的研究报告以及相关的研究材料也得到了很多大学、研究机构和专业协会的认可，如哈佛大学、墨尔本大学、国际教育成就评价协会、联合国教科文组织、国际教育学术联合会等。那么，究竟是什么原因使得SACMEQ的研究与培训项目取得如此成功呢？
（一）个性化而又充分合作的工作风格 SACMEQ之所以能有开展高质量的研究和培训项目的能力，在于以下两个因素：一是参与项目的教育决策者可以决定自己所在国家执行SACMEQ研究和培训的范围与今后的努力方向；二是以“做中学”（learn by doing）的行动策略来培养各国执行SACMEQ研究的能力。在这样的氛围下，SACMEQ的国家研究协调员就能共同工作，分享经验，并互相学习。这样做的一个重要作用就是，在研究目的、目标人群、样本设计、资料收集工具、实地工作、基本数据分析以及政策报告格式等方面，SACMEQ都能保证研究的技术流程始终如一。这些相同的技术流程能确保SACMEQ针对不同国家或地区的实际情况提供有意义的政策建议。
（二）以决策者关注的政策问题为研究的基础
SACMEQ的每个研究项目都会与参与的教育决策者进行磋商，以便确定各国教育政策的关注点。通过按照具体政策问题的需要来收集信息可以加速研究的进程；防止研究被带入无休止的“审查性盘问”而失去决策者的信任；允许决策者修正研究过程，这样就增加了研究结果对决策的影响程度。
在每一份SACMEQ的国家政策报告的最后一章，都有对前面章节出现过的各种政策建议的元分析。这些政策建议分析分为五大类：向教育工作者、社区、家长以及专家进行咨询，对既有的规划程序的检视，根据既定目标收集资料，教育政策研究计划，对基础设施和人力资源的调查。政策执行时间也大致分为三大类：短期（3～9个月）、中期（1～2年）、长期（3～5年）。此外，每项政策建议都会对项目费用进行预估。
在SACMEQ报告正式出版之前，所有的政策建议初稿都经过成员国教育决策者的讨论和分类。这一步很重要，因为这对报告的文字表达和可行性都有关键性的作用。因为，一条词不达意的建议会使人感到疑惑不解，甚至可能使得决策者对报告的其他材料的准确性和可行性都产生怀疑。
（三）采用先进的软件系统
在资料收集阶段，SACMEQ使用的是国际教育成就评价协会开发的数据录入软件系统WINDEM。该系统与国际教育规划研究所的JANITOR专业数据清理转化软件配合使用，检查数据的正确性，保证所有从问卷和测验中的数据能够准确地转换成电脑可识别的数据格式。
在取样阶段，SACMEQ采用国际教育成就评价协会的官方技术标准。为了达到这一标准，SACMEQ特别开发了计算机软件IIEPSAMP和IIEPJACK，前者帮助收集大量与学校和学生有关的交互数据，后者处理评价要求的调查样本的准确性问题。
在测验编制和评分阶段，SACMEQ采用西澳大利亚大学开发的RUMM软件进行测验数据分析。这一软件同时支持经典测验和项目反应理论模型，对测验的编制和评分起到了非常重要的作用。项目反应理论模型对比较不同国家之间以及国家内部的学生的阅读、数学学业成就都极有帮助。
在研究结果的呈现阶段，SACMEQ使用StatPlanet交互模拟软件，该软件可以以分布地图、曲线图、多因素趋势图和表格等视觉化的形式来呈现研究结果。
注释：
①东南非洲教育质量监测联盟原名为“南部非洲教育质量监测联盟”（the Southern Africa Consortium for Monitoring Educational Quality， SACMEQ），2003年更名为东南非洲教育质量监测联盟，但是首字母缩写“SACMEQ”则保留了下来。在非洲还有一项具有重要影响的基础教育质量监控项目“非洲法语国家联盟教育系统分析项目”（Programme d’Analyse des Systèmes Educatifs de la CONFEMEN，PASEC），同样与国际社会援助有着千丝万缕的联系。限于语言因素，本文集中于对东南非洲教育质量监测联盟项目的研究。
参考文献：
[1]Saul Murimba. The Southern and Eastern Africa Consortium for Monitoring Educational Quality （SACMEQ）： Mission， Approach and Projects[J]. Prospects， 2005（35）： 75-89.
[2]SACMEQ’s Membership， Governmence， and Management[EB/OL]. http：//www.sacmeq.org/about.htm#governance， 2012-12-10.
[3]UNESCO. Working Meetings of SACMEQ National Research Co-ordinators on ‘Computer-based Analysis of Pupil Achievement Levels for the SACMEQ II Project’[R]. Paris：IIEP/Ministry of Higher Education and Scientific Research， 2002：5.
[4]SACMEQ’s Visualization[EB/OL]. http：//www.sacmeq.org/visualization-research.htm， 2012-12-10.
编辑 许方舟 校对 郭伟
关键词：国际教育援助；教育改革；东南非洲教育质量监测联盟；能力建设
非洲基础教育并不是落后的代名词。在联合国教科文组织国际教育规划研究所等国际非营利组织的大力支持下，经过近20年的发展，东南非洲教育质量监测联盟（the Southern and Eastern Africa Consortium for Monitoring Educational Quality，SACMEQ）所开展的基础教育质量监测评估项目已经成为在非洲开展的具有重要国际影响力的评估项目之一①。2004年，因为其出色的工作成绩和地区影响，SACMEQ被联合国教科文组织国际教育局授予夸美纽斯奖章。本文期望通过对SACMEQ发展历程和监测实施过程的考察，对国际基础教育改革的推进和我国基础教育质量监测体系的建设有所启示。
一、发展历程
1991-1992年，东南非洲教育质量监测还只是国际教育规划研究所发起的一个小型研究项目，只在一个国家（津巴布韦）开展研究。2000-2010年，它已经发展成为东南部非洲教育部长之间重要而有力的工作网络。1995年，SACMEQ正式成立，有7个成员国，分别是肯尼亚、马拉维、毛里求斯、纳米比亚、坦桑尼亚、赞比亚和津巴布韦。1997年，SACMEQ正式注册成为一个独立的非政府机构，拥有15个成员国——除了上述提到的7个成员国之外，还有博茨瓦纳、莱索托、莫桑比克、塞舌尔、南非、斯维茨兰、乌干达、坦桑尼亚（内陆和桑给巴尔）。
纵观SACMEQ的发展历程，它的每一个发展阶段都伴随着与国际教育规划研究所之间合作形式的重大转变——国际教育规划研究所逐渐减少对SACMEQ的研究和培训方向的干预，转而注重其自身能力建设，直至其能独立开展相应的基础教育质量监测研究。在第一阶段（1989-1994年），国际教育规划研究所是津巴布韦实验研究的发起者，与津巴布韦教育部共同研究有关津巴布韦的教育条件和教育质量问题，开展试验性的研究和培训项目。在第二阶段（1995-1998年），国际教育规划研究所作为一个促进者推动SACMEQ I项目的展开——有7个国家的教育部参与，涉及南部非洲的约1000所小学、20000名学生和2000名教师，主要监测阅读领域教育质量。在第三阶段（1999-2004年），国际教育规划研究所作为一个外在的帮助者，协助SACMEQ II项目的展开——有14个国家的教育部参与，涉及东南非洲的约2300所小学、40000名学生和5300名教师，主要监测阅读和数学领域教育质量。需要指出的是，在本阶段结束前，国际教育规划研究所都处在掌控地位。在第四阶段（2005-2009年），国际教育规划研究所作为外在的帮助者之一，协助SACMEQ III项目的展开——有15个国家的教育部参与，涉及东南非洲的约2800所小学和初中、60000名学生、8000名教师和2800名校长。在这一阶段，作为对非洲教育改革的推进，项目还涉及了对艾滋病预防教育的研究。值得注意的是，这一项目主要由SACMEQ的协调中心主持完成。在第五阶段（2010年至今），作为始终的伙伴，国际教育规划研究所把各国自身研究和培训能力的提升放在了首位。在这一阶段，除了延续SACMEQ III项目以外，SACMEQ自2012年开始自行组织SACMEQⅣ项目的研究工作。[1]
1995-1998年间，由于没有常设机构和办公地，项目的运作主要由国际教育规划研究所主持，由它开展定期的工作坊培训，培训各国的国家研究协调员完成项目要求的质量监控工作。1998年，这一情况有所改善，SACMEQ设立了一个协调员办公室，之后又在津巴布韦联合国教科文组织哈拉雷地区办公室（UNESCO’s Harare Cluster Office in Zimbabwe）设立了SACMEQ数据处理办公室。
2006年，赞比亚政府正式将SACMEQ注册为“以东南非洲各国教育部长为成员的国际非营利组织”。2007年，在国际教育规划研究所的努力下，SACMEQ的研究和培训工作得到了一些经费支持。2008-2009年间，SACMEQ在巴黎设立了临时的协调中心。2010年，SACMEQ协调中心重回非洲，主要由教育部长联席会负责具体的事务。
二、管理与运行机制
SACMEQ的管理与运行主要由该联盟的教育部长联席会、协调中心、管理委员会负责，由作为合作伙伴及外在援助者的国际教育规划研究所协助。概括来说，教育部长联席会负责明确研究方向，制定总体政策；协调中心与合作者一起为具体合作领域争取资金，并提供技术支持；管理委员会负责为各地的协调中心提供运作和经费方面的帮助，它是教育部长联席会的分委员会，每年开一次会议，并根据需要召开咨询会议。具体的管理与运行机制如下：[2]
第一，教育部长联席会。每个教育部长都要管理自己国内的SACMEQ研究活动。例如，任命本国的SACMEQ研究协调员，与课程和评价研究专家共同审核测验和编制问卷，对数据收集等工作进行培训，支付本国SACMEQ项目费用，分担整个SACMEQ项目费用。
第二，协调中心。协调中心负责SACMEQ的日常工作安排，中心工作人员由SACMEQ协调中心主任和数据处理管理员（Data Processing Manager）组成。SACMEQ协调中心负责为成员国的研究协调员及其工作提供管理和技术支持。同时，它还与合作机构一起努力为SACMEQ的研究项目和培训项目争取经费。此类项目经费支出包括工作坊培训、取样和测量的经费投入、购买和开发满足样本取样和数据分析以及数据清理需要的软件、设计制作技术和实地操作手册、SACMEQ的科学与测量委员会的会议支出等。 第三，国家研究协调员。SACMEQ的国家研究协调员来自各国不同部门，目的在于更好地开发各个成员国的人力资源，而不是为了单纯提供各种数据和指标。例如，博茨瓦纳、莱索托、马拉维、斯维茨兰、坦桑尼亚、乌干达、赞比亚、津巴布韦等国的研究协调员就来自于这些国家的规划部门；肯尼亚的研究协调员来自于该国考试中心；毛里求斯的研究协调员来自于该国人力资源部；莫桑比克的研究协调员来自于该国国家教育发展研究所；塞舌尔、坦桑尼亚（大陆）的研究协调员来自于秘书长办公室；南非的研究协调员来自于国家质量保障局。国家研究协调员与副协调员的工作开展需要得到来自本国相关人员的支持，尤其是在数据收集、录入等操作中更是如此。例如，在第三阶段研究的数据收集阶段，各国一共培训了2250名数据收集员，然后3人一组实地访问了大约2800所学校。
第四，合作伙伴与外在援助。国际教育规划研究所对SACMEQ的研究至关重要——它直接为SACMEQ的协调中心和国家研究协调员提供培训与技术支持。此外，除了国际教育成就评价协会等国际组织，还有肯尼亚的Aga Khan基金会、马拉维的国家教育研究与培训中心等各国相关组织与机构都在上述领域发挥了重要作用。
三、研究的准备与实施
（一）集中培训与工作坊培训
集中培训和工作坊培训是国际教育规划研究所等国际组织推动SACMEQ健康发展和自身能力建设的重要途径，也是SACMEQ不可或缺的组成部分。
1.集中培训
2005年，为了保障SACMEQ能顺利地独立开展第三阶段的研究，国际教育规划研究所集合了一批在国际教育研究领域有重要影响力的专家对SACMEQ的研究进行了10次专题培训。这10次的培训主题分别是：教育研究的基本概念与术语、从教育政策议题到具体的研究问题与研究设计、教育调查研究的抽样设计、以实验和调查为基础总结教育研究、测验与考试的试题编写、测验编制的审核、测验编制中的试测与题目分析、问卷设计、数据分析、数据准备和管理。
2.工作坊培训
自1992年起，SACMEQ每年至少举行一次面对面的工作坊培训。每一次培训都集中于某一项直接应用于研究的核心技能，如计算机辅助的学生成就水平分析，运用经典项目分析和项目反映理论来编制及改进语言和数学学科的测验，计算机辅助的调查取样和大规模的教育质量研究的数据管理等。工作坊培训是由大规模调查研究领域的世界一流专家主持的。如果国家研究协调员掌握了足够的相关技能，他们自己也可以成为培训者。例如，2002年，一个研究协调员小组与国际教育规划研究所的专家一起为马拉维的教育官员进行了有关数据收集与分析方面的专门培训。[3]
（二）监测工作的实施
SACMEQ监测的焦点是15个成员国基础教育系统中的学校教育条件和教育质量。以SACMEQ III项目为例，其主要目的是监测总体的学校教育条件、六年级学生和教师的阅读与数学学业成就水平、学生和教师对艾滋病防治知识的掌握程度等信息。监测工作的实施主要包括如下四个阶段。
第一，在制定监测框架后，确定监测项目，并由各国教育部门决策者确定本国学生需要达到的基本水平标准。SACMEQ运用纳什量表来展现学生的阅读和数学成绩，以及不同水平的能力的提高程度。这种方法不再是用合格或不合格两个标准来评价教师和学生的表现，而是从易到难，用8个水平标准来表示阅读和数学成绩。例如，阅读的最低水平是前阅读（pre reading），最高水平是批判式阅读（critical reading）。这种新式方法不仅可以较为精确地展示教育质量，还可以确定教师和学生今后的关注重点。
第二，协调中心集合各领域专家对以前的试题和新编制的试题进行审查，确定试题的信度和效度，并进行先导性的测验，然后确定测验是否可行，并翻译成不同的语言版本。
第三，在整体监测工作开始前，进行为期三天的数据收集员培训，只有经过培训并达到合格标准的数据收集员才能进入学校开展相应的工作。同时，提前通知各所学校，为学生、教师和校长提供测验手册。数据收集员严格按照测验手册的要求进行施测，然后按照编制好的软件录入和清理所有的数据（data cleaning）并进行数据分析。
第四，在数据分析工作结束后，研究人员和教育决策者共同完成了两份工作报告：《学生学业评价结果》《学校资源的发展水平和趋势》。然后，根据工作报告和地区研究总结继续进行深度研究，形成了七份政策报告：《阅读和数学的学业成就处在何种水平》《艾滋病防治教育的成效》《阅读和数学成绩中的性别差异是否缩小》《留级的程度与趋势》《教科书发放项目的成效》《学校不同学科教师的薪资差异》《学校领导岗位中的性别比例是否平衡》。
值得注意的是，为了使研究报告更为通俗易懂，而不是局限于专业人员才能看懂，SACMEQ研究报告在写作形式上强调研究结果的“可视化”，而非通过大量的数据、表格展现研究成果。例如，SACMEQ采用了条线图、多维趋势图以及特别研制的“数据地球交互可视系统”（StatPlanet interactive visualization system）来直观地呈现数据分析结果和研究结论。[4]
四、特色与经验
很多政府部门、大学和研究机构都在发展中国家开展过与教育质量评估和监测有关的研究。然而，此类研究得出的研究报告很少能够引起教育部门决策者的关注。而由SACMEQ发布的教育政策报告对很多国家及其教育部门决策者都有着持续的影响。同样地，SACMEQ高质量的研究报告以及相关的研究材料也得到了很多大学、研究机构和专业协会的认可，如哈佛大学、墨尔本大学、国际教育成就评价协会、联合国教科文组织、国际教育学术联合会等。那么，究竟是什么原因使得SACMEQ的研究与培训项目取得如此成功呢？
（一）个性化而又充分合作的工作风格 SACMEQ之所以能有开展高质量的研究和培训项目的能力，在于以下两个因素：一是参与项目的教育决策者可以决定自己所在国家执行SACMEQ研究和培训的范围与今后的努力方向；二是以“做中学”（learn by doing）的行动策略来培养各国执行SACMEQ研究的能力。在这样的氛围下，SACMEQ的国家研究协调员就能共同工作，分享经验，并互相学习。这样做的一个重要作用就是，在研究目的、目标人群、样本设计、资料收集工具、实地工作、基本数据分析以及政策报告格式等方面，SACMEQ都能保证研究的技术流程始终如一。这些相同的技术流程能确保SACMEQ针对不同国家或地区的实际情况提供有意义的政策建议。
（二）以决策者关注的政策问题为研究的基础
SACMEQ的每个研究项目都会与参与的教育决策者进行磋商，以便确定各国教育政策的关注点。通过按照具体政策问题的需要来收集信息可以加速研究的进程；防止研究被带入无休止的“审查性盘问”而失去决策者的信任；允许决策者修正研究过程，这样就增加了研究结果对决策的影响程度。
在每一份SACMEQ的国家政策报告的最后一章，都有对前面章节出现过的各种政策建议的元分析。这些政策建议分析分为五大类：向教育工作者、社区、家长以及专家进行咨询，对既有的规划程序的检视，根据既定目标收集资料，教育政策研究计划，对基础设施和人力资源的调查。政策执行时间也大致分为三大类：短期（3～9个月）、中期（1～2年）、长期（3～5年）。此外，每项政策建议都会对项目费用进行预估。
在SACMEQ报告正式出版之前，所有的政策建议初稿都经过成员国教育决策者的讨论和分类。这一步很重要，因为这对报告的文字表达和可行性都有关键性的作用。因为，一条词不达意的建议会使人感到疑惑不解，甚至可能使得决策者对报告的其他材料的准确性和可行性都产生怀疑。
（三）采用先进的软件系统
在资料收集阶段，SACMEQ使用的是国际教育成就评价协会开发的数据录入软件系统WINDEM。该系统与国际教育规划研究所的JANITOR专业数据清理转化软件配合使用，检查数据的正确性，保证所有从问卷和测验中的数据能够准确地转换成电脑可识别的数据格式。
在取样阶段，SACMEQ采用国际教育成就评价协会的官方技术标准。为了达到这一标准，SACMEQ特别开发了计算机软件IIEPSAMP和IIEPJACK，前者帮助收集大量与学校和学生有关的交互数据，后者处理评价要求的调查样本的准确性问题。
在测验编制和评分阶段，SACMEQ采用西澳大利亚大学开发的RUMM软件进行测验数据分析。这一软件同时支持经典测验和项目反应理论模型，对测验的编制和评分起到了非常重要的作用。项目反应理论模型对比较不同国家之间以及国家内部的学生的阅读、数学学业成就都极有帮助。
在研究结果的呈现阶段，SACMEQ使用StatPlanet交互模拟软件，该软件可以以分布地图、曲线图、多因素趋势图和表格等视觉化的形式来呈现研究结果。
注释：
①东南非洲教育质量监测联盟原名为“南部非洲教育质量监测联盟”（the Southern Africa Consortium for Monitoring Educational Quality， SACMEQ），2003年更名为东南非洲教育质量监测联盟，但是首字母缩写“SACMEQ”则保留了下来。在非洲还有一项具有重要影响的基础教育质量监控项目“非洲法语国家联盟教育系统分析项目”（Programme d’Analyse des Systèmes Educatifs de la CONFEMEN，PASEC），同样与国际社会援助有着千丝万缕的联系。限于语言因素，本文集中于对东南非洲教育质量监测联盟项目的研究。
参考文献：
[1]Saul Murimba. The Southern and Eastern Africa Consortium for Monitoring Educational Quality （SACMEQ）： Mission， Approach and Projects[J]. Prospects， 2005（35）： 75-89.
[2]SACMEQ’s Membership， Governmence， and Management[EB/OL]. http：//www.sacmeq.org/about.htm#governance， 2012-12-10.
[3]UNESCO. Working Meetings of SACMEQ National Research Co-ordinators on ‘Computer-based Analysis of Pupil Achievement Levels for the SACMEQ II Project’[R]. Paris：IIEP/Ministry of Higher Education and Scientific Research， 2002：5.
[4]SACMEQ’s Visualization[EB/OL]. http：//www.sacmeq.org/visualization-research.htm， 2012-12-10.
编辑 许方舟 校对 郭伟