论文部分内容阅读
摘 要：随着信息化时代的到来，以基层台站气象职工为主要培训对象的气象远程教育培训得到蓬勃发展。目前，气象远程教育培训效果是人们关注的焦点。在统计“天气预报技术与方法”学习评价成绩的基础上，分析了气象远程教育培训中影响学员学习成绩的主要因素，指出了当前气象远程培训学员学习评价中存在的问题，并提出改进气象远程培训学习评价的几点建议。
关键词：远程教育；学习评价；试题库
中图分类号：G726 文献标识码：A
一、引言
气象远程教育培训经过多年的发展，逐步构建了具有部门特色的，以国家级主站、省级二级站、地县级远程学习点组成的三级气象远程教育培训体系。目前，培训效果是关注的焦点，而考试是学员学习成绩的评定，是学员学习收获的一个很重要的指标，是学员是否掌握好所学知识的重要标志。通过对学员考试成绩的分析，既可以及时检验和测评培训的效果、培训的组织管理情况、学员的学习情况，还可以评价和判断试题库的组建情况。因此，为保证气象远程培训的质量和效果，必须对气象远程教育培训考试成绩进行统计分析，真正发挥考试在教学中的作用，更好地给学员及教师提供远程培训的教学支持服务。
本文通过对“天气预报技术与方法”远程培训考试成绩的统计，分析气象远程教育培训中影响学员学习成绩的主要因素，指出当前气象远程培训学员学习评价中存在的问题，并探讨改进气象远程培训学习评价的方法思路。
二、研究对象及方法
中国气象局气象干部培训学院组织了三期“天气预报技术与方法”远程培训。培训对象为各地市级、县级气象局预报员及相关业务和管理人员。由于培训内容体量较大，培训分为三期进行。在培训前和培训后共组织了六次网上统一在线考试，六次考试均由在线考试系统从试题库随机抽取题目自由组卷，考试试题以是非判断题和单项选择题为主，试卷满分100分。
三、统计结果分析
（一）总体概况
全国报名参加三期“天气预报技术与方法”远程培训的学员有10887人，参加培训前考试的有4564人，参加培训后考试的有6199人，见表1。
参加培训的学员中有8.9%的学员为硕士及以上学历，69.1%的学员为本科学历，15.9%的学员为专科学历，6.1%的学员为中专及以下学历，见图1。可见，参加“天气预报技术与方法”远程培训的学员以本科及以上学历为主。
在培训前的考试中，学员的平均成绩为58.5分、考试合格率为49%；在培训后的考试中，学员的平均成绩为70.3分、考试合格率为77%，见图2。学员的平均成绩提高了20.2%、合格率提升了28%。经过培训，学员平均成绩及合格率均有很大程度的提高，培训取得了良好的效果。
在三期的天气预报技术与方法远程培训中，由于第1期的培训内容为全国各地天气预报业务都涉及的基础理论知识部分，而第2期和第3期内容为各类灾害性天气预报分析。由于天气预报业务的区域性强，各地预报业务的重点不同，因此总体来看，第1期远程培训考试成绩的可信度最高，所以选择第1期培训考试成绩为本文分析对象。
第1期培训前考试2487人参加，平均成绩为58.2分，其中60分以上学员1221人，合格率49%；培训后考试2848人参加，平均成绩为75.3分，其中60分以上学员2419人，合格率85%，合格率提升了36%；85分以上学员938人，优秀率为33%。整体而言，经过培训学员成绩有明显提高。
（二）不同学历的学员成绩对比分析
由于学员人数较多，学历差异较大，因此在成绩统计分析过程中，考虑了学历对考试成绩的影响，根据学员不同的学历情况进行了平均成绩的统计，如表2。
从表2中可以看出，学历与考试成绩呈正比，硕士及以上学历的学员成绩明显高于本科学历学员，本科学历学员的考试成绩高于专科学员，专科学员的考试成绩又高于中专及以下学员。随着学历的降低，学员的平均成绩也逐步降低。
（三）不同年龄段的学员成绩对比分析
在成绩的统计分析过程中，还考虑了年龄对考试成绩的影响。将参加第1期培训考试学员的成绩按不同年龄段进行对比分析，结果如表3。
从表3中可以看出，不同年龄段学员的考试成绩随年龄的增大呈逐渐下降的趋势。其中，30岁以下学员平均成绩为76.8分；31～40岁之间的学员平均成绩为74.2分；41～50岁之间的学员平均成绩为74.1分；51～60岁之间的学员平均成绩为73.7分。
以上分析表明，考试采用的是在线答题的方式，年龄较大的学员答题比年轻人速度慢，可能是造成其成绩偏低的原因之一；但也表明，年轻学员思维活跃、识记能力及学习能力均较强，所以考试成绩偏高，相对而言，年龄偏大的学员考试成绩则相对偏低。
（四）学习时长对学员成绩的影响分析
对参加第1期培训后考试的学员的学习时长进行了统计，学时未达到及达到教学计划学时要求的学员考试成绩明显不同。未达到的学员平均考试成绩70.2分，达到的学员平均考试成绩78.7分，见表4。从表4可以看出，未达到的学员平均成绩明显低于整体平均成绩，而达到的学员平均成绩又明显高于整体平均成绩。因此，在培训过程中，要求学员要按照教学计划的要求学习培训课程。
由于学习是一个内因起主导作用的活动过程，学习效率影响学习收获，离开学员的积极性、主动性，教学就不会取得良好的效果。因此，在制定远程培训教学计划时，应根据培训课程的总课时数适当安排培训周期，全面做好学习支持服务，实现培训目标。
（五）培训前、后平均成绩提高幅度的对比分析
由于组织了培训前、后两次考试，因此有必要对培训前、后考试成绩进行对比分析，所以对第1期不同年龄段、不同专业背景（分为科班、非科班两大类）、不同学历层次学员的培训前、后平均考试成绩的提高幅度进行了比较，结果见表5、表6、表7。
从表5、表6及表7中可以看出，不同年龄段、不同专业背景、不同学历层次学员的培训前、后考试成绩提高幅度有明显不同。51～60岁学员的成绩提高幅度最大，40岁以下学员的成绩提高幅度偏小；非科班学员的成绩提高幅度较大，科班学员的成绩提高幅度较小；中专及以下学员的成绩提高幅度最大，硕士及以上学员的成绩提高幅度最小。这是由于年龄偏大的学员，往往学历较低、基础较差，所以经过培训后，培训前、后考试成绩的提高幅度偏大；科班毕业的学员，学前已基本掌握了基础知识部分，所以经过培训后考试成绩提高幅度偏小。由于近些年气象部门新进员工多为学历偏高人员，这些年轻而学历又高的学员由于基础理论知识的储备多、能力强，所以虽然考试成绩偏高，但培训前、后成绩的提高幅度偏低。
四、讨论与建议
（一）气象远程教育培训学习考核评价存在的问题
1.在考试方式上过分重视终结性考试评价，忽视形成性评价
目前气象远程培训的考核评价采取的是培训终结性评价。这种评价方式用单一的考试手段代替了多元化的评价，单纯以考试成绩评定学员的学习，忽视形成性评价。其实，无论是形成性评价还是终结性评价，其作用都是对学生学习的评价，其比例应该由具体的课程性质决定，而不是单一地采用终结性评价的形式。这种与传统教育相似的学习评价方式突出了“考”的功能，一些教学思想和教学方法的改进，以及教学策略的运用在这种考试中很少体现出来，以考为主，因而从考试结果中不仅分析不了教与学过程，更不能对培训质量做出客观评价。一般而言，在师生分离的情况下，学员在学习中对形成性评价的需要比终结性评价更为迫切，因为在网络学习中，形成性评价对学员学习过程及效果的影响比终结性评价更大。
2.在考试内容上过分强调了学员对知识的识记能力，忽视了学员综合运用知识解决实际问题的能力
气象远程培训的考试多数以记忆性知识为主，出题方式多数为是非判断题和单项选择题。这类内容多是记忆性的，这样就使得学员自主学习能力与解决问题的能力在考试中体现不出来，影响学员学习的主动性和积极性。
3.在线考试所用试题库在标准化、科学化建设方面存在不足
考试所用试题库还不是很完善，虽然试题数量尚可，但试题均没有合适的区分度、难度等指标。试题库制度是学员评价的科学化、客观化、标准化的需要。试题库绝不是试题的组合，题库建设必须立足于科学的方法、手段，有一个逐渐积累、形成和评价的过程。一般地说，题库中试题必须应经过难度和区分度检验的科学筛选。试题库建设基本都是教师试题的简单汇集，这样的题库用在教考分离上会缺乏实际意义。
（二）气象远程教育学习评价方法改进的几点建议
1.构建多元化的评价指标体系
在气象远程培训的教学过程中，学习效果的评价方式不是单一的，是多元化的。评价形式应采取多样灵活的方式，应该是终结性评价与形成性评价相结合的方式。形成性评价是远程培训课程考核中一个不可或缺的环节，考核形式设计和形成性评价比重的安排既影响到学习过程管理的职能发挥，又影响到学员学习的积极性，应该利用现代网络和通信技术，发挥三级气象远程培训体系的功能，设计出使教与学互动、形成性与终结性评价贯通的考核模式。
不仅考核学员培训后的学习成绩，还要考核学员学习过程的收获。这就要加强学习过程的管理，将计划、组织、控制职能用于学习过程之中，发现问题并及时纠正、补充。使学习过程的目标与掌握相关知识趋近，使学习过程成为考核的一部分，以期推动学员在学习中进行评价，在评价中进行学习。
2.评价内容进一步注重“质”的评价
制定比较适合气象基层职工考试内容的参考原则和标准。对学员学习评价的内容应该包括学员掌握专业理论知识和实践知识的程度及已达到的认知水平等。考试评价过程中要注意全面考核学员对基本知识、基本技能、基本理论的掌握程度及应用能力。尤其是形成性评价的内容应更具有实用性，这样对学员知识构建更具有建设性，有助于激发学员的学习意愿和潜能。
3.进一步完善在线考试题库
在远程培训的学习评价中，为了提高考核结果的有效性和可靠性，试题库建设时注重内容组合、学习导向，力争达到重点突出、客观全面、难易适度。编制试题时把握好试题的难度和区分度非常重要。因为理想的试题难度不一定有理想的区分度，而难度相近的试题，其区分度也会有很大差异，只有二者指标适宜，才能把每一位学员的真正知识水平表现出来。
试题库建设是一个循环渐进的过程，培训过程中应根据新的教材和教学内容，及时健全和更新试题库，并对考题难易程度进行重新分类，进一步确定试题的区分度。要注意尽量使其内容在范围、形式、难易程度上与终结性评价所要求应掌握的内容趋近，以增强试题库内容的实用性。在编制试卷时按试题难度、区分度筛选试题，分配试题类型、比例及题量，使试题的覆盖面广，既全面又突出重点，使考试真正成为测量学员学习情况与评价教学效果的有效工具。
参考文献
[1]李红波，胡建兵.网络学习评价模式[J].电化教育研究，2004，（5）.
[2]余胜泉.基于互联网络的远程教学评价模型[J].开放教育研究，2003，（1）.
关键词：远程教育；学习评价；试题库
中图分类号：G726 文献标识码：A
一、引言
气象远程教育培训经过多年的发展，逐步构建了具有部门特色的，以国家级主站、省级二级站、地县级远程学习点组成的三级气象远程教育培训体系。目前，培训效果是关注的焦点，而考试是学员学习成绩的评定，是学员学习收获的一个很重要的指标，是学员是否掌握好所学知识的重要标志。通过对学员考试成绩的分析，既可以及时检验和测评培训的效果、培训的组织管理情况、学员的学习情况，还可以评价和判断试题库的组建情况。因此，为保证气象远程培训的质量和效果，必须对气象远程教育培训考试成绩进行统计分析，真正发挥考试在教学中的作用，更好地给学员及教师提供远程培训的教学支持服务。
本文通过对“天气预报技术与方法”远程培训考试成绩的统计，分析气象远程教育培训中影响学员学习成绩的主要因素，指出当前气象远程培训学员学习评价中存在的问题，并探讨改进气象远程培训学习评价的方法思路。
二、研究对象及方法
中国气象局气象干部培训学院组织了三期“天气预报技术与方法”远程培训。培训对象为各地市级、县级气象局预报员及相关业务和管理人员。由于培训内容体量较大，培训分为三期进行。在培训前和培训后共组织了六次网上统一在线考试，六次考试均由在线考试系统从试题库随机抽取题目自由组卷，考试试题以是非判断题和单项选择题为主，试卷满分100分。
三、统计结果分析
（一）总体概况
全国报名参加三期“天气预报技术与方法”远程培训的学员有10887人，参加培训前考试的有4564人，参加培训后考试的有6199人，见表1。
参加培训的学员中有8.9%的学员为硕士及以上学历，69.1%的学员为本科学历，15.9%的学员为专科学历，6.1%的学员为中专及以下学历，见图1。可见，参加“天气预报技术与方法”远程培训的学员以本科及以上学历为主。
在培训前的考试中，学员的平均成绩为58.5分、考试合格率为49%；在培训后的考试中，学员的平均成绩为70.3分、考试合格率为77%，见图2。学员的平均成绩提高了20.2%、合格率提升了28%。经过培训，学员平均成绩及合格率均有很大程度的提高，培训取得了良好的效果。
在三期的天气预报技术与方法远程培训中，由于第1期的培训内容为全国各地天气预报业务都涉及的基础理论知识部分，而第2期和第3期内容为各类灾害性天气预报分析。由于天气预报业务的区域性强，各地预报业务的重点不同，因此总体来看，第1期远程培训考试成绩的可信度最高，所以选择第1期培训考试成绩为本文分析对象。
第1期培训前考试2487人参加，平均成绩为58.2分，其中60分以上学员1221人，合格率49%；培训后考试2848人参加，平均成绩为75.3分，其中60分以上学员2419人，合格率85%，合格率提升了36%；85分以上学员938人，优秀率为33%。整体而言，经过培训学员成绩有明显提高。
（二）不同学历的学员成绩对比分析
由于学员人数较多，学历差异较大，因此在成绩统计分析过程中，考虑了学历对考试成绩的影响，根据学员不同的学历情况进行了平均成绩的统计，如表2。
从表2中可以看出，学历与考试成绩呈正比，硕士及以上学历的学员成绩明显高于本科学历学员，本科学历学员的考试成绩高于专科学员，专科学员的考试成绩又高于中专及以下学员。随着学历的降低，学员的平均成绩也逐步降低。
（三）不同年龄段的学员成绩对比分析
在成绩的统计分析过程中，还考虑了年龄对考试成绩的影响。将参加第1期培训考试学员的成绩按不同年龄段进行对比分析，结果如表3。
从表3中可以看出，不同年龄段学员的考试成绩随年龄的增大呈逐渐下降的趋势。其中，30岁以下学员平均成绩为76.8分；31～40岁之间的学员平均成绩为74.2分；41～50岁之间的学员平均成绩为74.1分；51～60岁之间的学员平均成绩为73.7分。
以上分析表明，考试采用的是在线答题的方式，年龄较大的学员答题比年轻人速度慢，可能是造成其成绩偏低的原因之一；但也表明，年轻学员思维活跃、识记能力及学习能力均较强，所以考试成绩偏高，相对而言，年龄偏大的学员考试成绩则相对偏低。
（四）学习时长对学员成绩的影响分析
对参加第1期培训后考试的学员的学习时长进行了统计，学时未达到及达到教学计划学时要求的学员考试成绩明显不同。未达到的学员平均考试成绩70.2分，达到的学员平均考试成绩78.7分，见表4。从表4可以看出，未达到的学员平均成绩明显低于整体平均成绩，而达到的学员平均成绩又明显高于整体平均成绩。因此，在培训过程中，要求学员要按照教学计划的要求学习培训课程。
由于学习是一个内因起主导作用的活动过程，学习效率影响学习收获，离开学员的积极性、主动性，教学就不会取得良好的效果。因此，在制定远程培训教学计划时，应根据培训课程的总课时数适当安排培训周期，全面做好学习支持服务，实现培训目标。
（五）培训前、后平均成绩提高幅度的对比分析
由于组织了培训前、后两次考试，因此有必要对培训前、后考试成绩进行对比分析，所以对第1期不同年龄段、不同专业背景（分为科班、非科班两大类）、不同学历层次学员的培训前、后平均考试成绩的提高幅度进行了比较，结果见表5、表6、表7。
从表5、表6及表7中可以看出，不同年龄段、不同专业背景、不同学历层次学员的培训前、后考试成绩提高幅度有明显不同。51～60岁学员的成绩提高幅度最大，40岁以下学员的成绩提高幅度偏小；非科班学员的成绩提高幅度较大，科班学员的成绩提高幅度较小；中专及以下学员的成绩提高幅度最大，硕士及以上学员的成绩提高幅度最小。这是由于年龄偏大的学员，往往学历较低、基础较差，所以经过培训后，培训前、后考试成绩的提高幅度偏大；科班毕业的学员，学前已基本掌握了基础知识部分，所以经过培训后考试成绩提高幅度偏小。由于近些年气象部门新进员工多为学历偏高人员，这些年轻而学历又高的学员由于基础理论知识的储备多、能力强，所以虽然考试成绩偏高，但培训前、后成绩的提高幅度偏低。
四、讨论与建议
（一）气象远程教育培训学习考核评价存在的问题
1.在考试方式上过分重视终结性考试评价，忽视形成性评价
目前气象远程培训的考核评价采取的是培训终结性评价。这种评价方式用单一的考试手段代替了多元化的评价，单纯以考试成绩评定学员的学习，忽视形成性评价。其实，无论是形成性评价还是终结性评价，其作用都是对学生学习的评价，其比例应该由具体的课程性质决定，而不是单一地采用终结性评价的形式。这种与传统教育相似的学习评价方式突出了“考”的功能，一些教学思想和教学方法的改进，以及教学策略的运用在这种考试中很少体现出来，以考为主，因而从考试结果中不仅分析不了教与学过程，更不能对培训质量做出客观评价。一般而言，在师生分离的情况下，学员在学习中对形成性评价的需要比终结性评价更为迫切，因为在网络学习中，形成性评价对学员学习过程及效果的影响比终结性评价更大。
2.在考试内容上过分强调了学员对知识的识记能力，忽视了学员综合运用知识解决实际问题的能力
气象远程培训的考试多数以记忆性知识为主，出题方式多数为是非判断题和单项选择题。这类内容多是记忆性的，这样就使得学员自主学习能力与解决问题的能力在考试中体现不出来，影响学员学习的主动性和积极性。
3.在线考试所用试题库在标准化、科学化建设方面存在不足
考试所用试题库还不是很完善，虽然试题数量尚可，但试题均没有合适的区分度、难度等指标。试题库制度是学员评价的科学化、客观化、标准化的需要。试题库绝不是试题的组合，题库建设必须立足于科学的方法、手段，有一个逐渐积累、形成和评价的过程。一般地说，题库中试题必须应经过难度和区分度检验的科学筛选。试题库建设基本都是教师试题的简单汇集，这样的题库用在教考分离上会缺乏实际意义。
（二）气象远程教育学习评价方法改进的几点建议
1.构建多元化的评价指标体系
在气象远程培训的教学过程中，学习效果的评价方式不是单一的，是多元化的。评价形式应采取多样灵活的方式，应该是终结性评价与形成性评价相结合的方式。形成性评价是远程培训课程考核中一个不可或缺的环节，考核形式设计和形成性评价比重的安排既影响到学习过程管理的职能发挥，又影响到学员学习的积极性，应该利用现代网络和通信技术，发挥三级气象远程培训体系的功能，设计出使教与学互动、形成性与终结性评价贯通的考核模式。
不仅考核学员培训后的学习成绩，还要考核学员学习过程的收获。这就要加强学习过程的管理，将计划、组织、控制职能用于学习过程之中，发现问题并及时纠正、补充。使学习过程的目标与掌握相关知识趋近，使学习过程成为考核的一部分，以期推动学员在学习中进行评价，在评价中进行学习。
2.评价内容进一步注重“质”的评价
制定比较适合气象基层职工考试内容的参考原则和标准。对学员学习评价的内容应该包括学员掌握专业理论知识和实践知识的程度及已达到的认知水平等。考试评价过程中要注意全面考核学员对基本知识、基本技能、基本理论的掌握程度及应用能力。尤其是形成性评价的内容应更具有实用性，这样对学员知识构建更具有建设性，有助于激发学员的学习意愿和潜能。
3.进一步完善在线考试题库
在远程培训的学习评价中，为了提高考核结果的有效性和可靠性，试题库建设时注重内容组合、学习导向，力争达到重点突出、客观全面、难易适度。编制试题时把握好试题的难度和区分度非常重要。因为理想的试题难度不一定有理想的区分度，而难度相近的试题，其区分度也会有很大差异，只有二者指标适宜，才能把每一位学员的真正知识水平表现出来。
试题库建设是一个循环渐进的过程，培训过程中应根据新的教材和教学内容，及时健全和更新试题库，并对考题难易程度进行重新分类，进一步确定试题的区分度。要注意尽量使其内容在范围、形式、难易程度上与终结性评价所要求应掌握的内容趋近，以增强试题库内容的实用性。在编制试卷时按试题难度、区分度筛选试题，分配试题类型、比例及题量，使试题的覆盖面广，既全面又突出重点，使考试真正成为测量学员学习情况与评价教学效果的有效工具。
参考文献
[1]李红波，胡建兵.网络学习评价模式[J].电化教育研究，2004，（5）.
[2]余胜泉.基于互联网络的远程教学评价模型[J].开放教育研究，2003，（1）.