论文部分内容阅读
作文评分员的评分过程是一种问题解决过程(problem solving process),由三个相互关联的状态组成:初始状态,中间状态和目标状态(Anderson1990:257)。当考试作文被分配给评分员时,问题解决处于初始状态。在这一状态下,评分员意识到有新的问题出现,并明确解决问题的目标就是给作文打分。随即,评分员对文章的质量开始评价,问题解决进入中间状态。在这一状态下,评分员会进行一系列的认知操作,如收集信息,理解话语意义,处理信息,考虑情境和语境因素,考虑考试伦理问题,初步做出决定等等。当评分员最终给作文打出分数时,即到达最终状态,问题也随即解决。评分员的问题解决行为过程被视为是在一定的认知结构的指导下进行的(Sternburg1985; Ausubel1968; Zhang2007)。这一认知结构是通过平衡机制(equilibration)建构的。而个体知识结构的平衡则是通过同化与顺应来实现的。当评分员的先验知识结构与外界刺激相适应时,知识即被同化,而当评分员的先验知识与外界刺激相矛盾时,个体即调整知识结构以顺应外界刺激(Piaget1977; Gao2007)。基于文献回顾与先期实验,本文提出关于作文评分过程的假说,即,作文评分过程是在评分员先验知识与外界刺激相互作用中所建构的三个认知结构之间的互动,这三个认知结构分别是写作结构(writing structure),评分结构(rating structure)和情景结构(contextual structure)。写作结构是评分员对不同能力水平作文应具备的特征的心理表征。评分结构是评分员在解决问题过程中所进行的一系列认知操作的心理表征。而情景结构是评分员对于社会环境因素所建构的心理表征。根据此假设所提出的评分过程模型,本研究试图回答以下三个研究问题:第一,这三个认知结构是怎样的?第二,它们分别是如何建构的,影响此建构的因素是什么?第三,作文评分过程的本质是什么?本研究以2012年英语专业八级考试作文(TEM8)评分为例,从以下四个方面收集数据:1)收集17位评分员分别对25篇作文的打分数据,获得有关作文质量和评分质量的一般信息,以便为进一步分析提供背景资料。2)发放给75位评分员的关于影响评分过程因素的问卷,目的在于探知影响评分员认知结构建构的因素。3)对6位评分员分别评阅10份作文时的有声思维录音数据的收集,目的在于对评分结构做出推断。4)对6位评分员的深度跟进访谈目的是为了对作文结构和情景结构以及评分员认知结构的建构做出推断。对所收集数据进行了以下四个方面的分析:1)利用多层面Rasch模型来分析17位评分员对25篇作文的打分数据;2)利用SPSS和AMOS对问卷数据进行探索性和验证性因素分析。3)利用NVivo8.0对有声思维录音进行转写、编码,并进行定量统计及定性分析。4)利用NVivo8.0对跟进访谈进行转写、编码和分析。本研究得出以下主要结论:1)影响作文评分过程的因素主要有六个方面:评分标准,评分员培训,评分员特征,评分环境,文本特征和评分监督。上述六类因素可以进一步归纳为三个相互影响、相互作用的因素:评分机构因素,评分员特征与文本特征。2)数据分析验证了所提出的假设,即作文评分过程的本质是评分员建构的三个认知结构(作文结构,评分结构和情景结构)之间的互动。3)这三个认知结构的建构受到了诸多评分员个人和社会因素的影响。这些因素从不同方面、以不同程度对这三个结构的组成元素产生影响。该研究对以下方面具有启示意义:作文评分构念,评分的信度、效度和评分员特征之间的关系、评分员的作用、评分标准的选择和制定、评分员培训的目的和过程、评分监控的手段和方法,有声思维法用于问题解决过程研究的优势和不足等。