大学英语分级测试作文评分中评分员偏差特征分析

来源 :湖南大学 | 被引量 : 0次 | 上传用户:tjtcqp
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为了对写作分项评分和整体评分进行进一步研究,检验其信度及评分偏差,本文主要通过项目反映理论及分析工具Facets对分项评分和整体评分进行信度以及偏差分析,并总结评分员在对各个评分项目以及不同水平考生评分时表现出的偏差规律。其中,整体评分表现作为参照,将分项评分的各个维度的评分信度进行比较.研究步骤分为以下三步:1.对已有成绩的写作样本分层抽样,从高到低10个级别的300份作文;2.15位有足够评分经验并有代表性的评分员完成对300篇作文的整体和分项2组评分实验;3.对测试结果进行初步检验,进而进行多侧面分析,检验评分信度并总结评分特点及规律。研究结果显示:(1)两组评分具有相似的宽严度水平,分项总分的宽严度与整体评分十分接近并且其偏差水平最低,15位评分员的内部一致性都较好,评分员9号,12号和10号显示出相对明显的趋中趋势;(2)“分项总分”只与15号评分员有一组显著性宽松偏差,10号评分员只对“语法”存在显著性宽松偏差,评分维度中“标点和大小写”与“任务”的显著性偏差方向相反,“整体评分”与“任务”偏差方向相同;(3)显著性宽松偏差明显多于显著性严格偏差,评分员更容易对高水平考生产生显著性偏差,且呈现出对高水平学生更宽松和对低水平学生更严格倾向,1号评分员评不同水平作文不存在显著性偏差,2号评分员的显著性严格偏差多于宽松偏差,不同于其他评分员;(4)Facets能够在探索系统性规律性偏差方面给出答案,并且结论有助于评分培训。本研究结果表明在本研究样本和对象的范围内,可针对易产生偏差的评分维度及学生群体进行专门的评分员培训,对评分量表上维度的描述及评分员的理解进行调整,以达到对量表同样的诠释,减少评分偏差,这对培训和评分量表的解释及改进有实际应用价值。本文最后还提出了研究中的不足以及有待进一步研究的问题。
其他文献
本文以标准地下地铁站为例,介绍了在BIM软件中大系统的正向设计方法,通过对Revit明细表、模块化设计的研究,探索打通模型内信息的互通互联的可行性,为推进BIM技术在机电正向
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
目的:探讨磁共振对颅内转移瘤的诊断价值。方法:回顾49例颅内转移瘤患者的MR影像资料,并结合其临床症状、发病部位进行分析。结果:43例颅内转移瘤呈多发,多位于大脑半球、小脑、
番茄外形圆润有光泽,并且富含较高的维生素C,具有营养价值以及食用价值,因此深受人们的喜欢。随着农业生产的提高,番茄的产量也有所增长,但在番茄的栽培过程中容易出现较多的
高校共青团以学生组织为抓手落实育人工作不仅具有必要性,而且具有可行性。学生组织为了有效落实团的育人工作任务,助力学生成长,在育人工作中则必须坚持育人的针对性原则、
对城市的空间扩展过程及其时空规律的研究,可正确地把握其在城市化进程中所处的阶段,预测城市发展趋势。本文利用数字化地形图、陆地卫星MSS、TM影像,对民国时期至2005年北京
地质灾害是人类生产生活以及建筑物的天敌,可以说地质灾害对于建筑和人们造成的危害是巨大的,所以在建筑中,工程师不仅仅要注重建筑物的美观以及实用功能,更要在防震功能抗震
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
珍珠王液体牙膏是一种新型的洁齿剂。为了解这种牙膏的洁齿效果,我们于1992年6月,选择河南省实验小学三、四年级的学生,进行了为期一个月的刷牙洁齿效果实验观察,现将结果报
针对现有圆形匹配算法无法同时满足高速度、低内存消耗以及高精度要求的情况,提出了一种基于击中率的新型圆形匹配算法.算法引入以轮廓作为匹配特征信息的圆环采样模板,匹配