在较短认知诊断计算机自适应测验中平衡属性测量程度

来源 :北京师范大学 | 被引量 : 0次 | 上传用户:dh9998
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
认知诊断是近年来测验理论中的热点。它能提供比IRT更多关于被试的信息。而计算机自适应测验能够提高测验的效率,经过多年的理论研究和实践已经相当成熟。当前,越来越多的人开始关注如何将认知诊断与计算机自适应测验技术结合起来。  认知诊断适合于开发用于形成性评价的测验,能够对教学和学生学习起到促进作用。而认知诊断测验要在日常教学中频繁使用,就必须缩短其长度,以免给学生造成过重的负担。在测验长度较短时,更需要合理分配测验资源,以达到最好的效果。本研究以上述两个要求为出发点,在总结前人研究,尤其是已有的认知诊断计算机自适应测验研究的基础上,着重研究了如何在较短认知诊断计算机自适应测验中平衡属性测量程度。  本研究将属性测量程度这个抽象概念操作化为三个不同层次的指标:属性测量次数、属性区分指标、属性掌握后验概率估计值到0.5的距离。通过蒙特卡洛模拟方法,使用融合模型,生成区分能力高和低两种题库,服从两种分布的知识状态群体。并在这四种条件下,分别研究了平衡这三个指标对认知诊断计算机自适应测验的影响。  在研究一中,我们研究了利用最大优先指标方法平衡属性测量次数对KL信息和PWKL方法的影响。研究发现,使用最大优先指标方法平衡属性测量次数能够提高KL方法的模式判准率,提高各个属性判准率之间的均衡性,但是会降低PWKL方法的判准率。使用最大优先指标方法平衡属性测量次数会使得测验倾向于选择测量属性个数较少的题目。平衡属性测量次数时,目标值的设定会影响测验的判准率,当目标值过大时,会干扰判准率。同时,我们也对比了使用最大优先指标方法及其变式平衡属性测量次数的不同。我们发现,最大优先指标方法的变式平衡属性测量次数使得测验更多选择测量属性个数较多的题目,对KL方法判准率的提高没有最大优先指标方法显著。  在研究二中我们主要研究了平衡ADIA--属性区分指标(Attribute-levelDiscrimination Index.ADI)中的一种,对测验的影响。在研究二的第一个子研究中我们探索了用最大优先指标方法平衡属性区分指标对KL方法和PWKL方法的影响。结果得到了和研究一中用最大优先指标方法平衡属性测量次数相类似的结论。不同之处在于,在题库质量较好的情况下,平衡属性区分指标对判准率的提高比平衡属性测量次数稍高,目标值对判准率的干扰没有平衡属性测量次数时的影响大。而且平衡属性区分指标对测量较少属性的题目的偏好没有平衡属性测量次数时那么强烈。  在研究二的第二个子研究中,我们探索了以ADIA的相对离差为权重,以ADIB为主要信息量的两种选题方法ADI和ADI01的效果。通过研究我们发现,新提出的两种方法在题库质量比较好的情况下,模式判准率和属性判准率的均值以及属性判准率之间的均衡性都要高于用最大优先指标方法平衡属性区分指标后的KL方法,但低于用最大优先指标方法平衡属性区分指标的PWKL方法。在题库质量较差时,ADI和ADI01方法和用最大优先指标方法平衡属性区分指标的KL方法的差别不大。  研究三从证据为中心的测验设计出发,探索了平衡属性掌握后验概率估计值到0.5的距离对测验的影响。我们以属性掌握后验概率估计值到0.5的距离的函数作为主要信息量ADIB的权重进行选题。并且考察了不设置目标距离、设置一个目标距离(分别为0.1、0.2、0.3)、设置多个目标距离的对测验的影响。通过研究我们发现:不论设置目标距离与否,平衡属性掌握后验概率估计值到0.5的距离的选题方法的模式判准率和属性判准率都比PWKL方法的稍高。而设置目标距离的方法各个属性判准率的均衡性要比不设置目标距离和PWKL方法的均衡性要高。设置多个目标距离的均衡性最高。而且设置多个目标距离能够解决因为题库结构而造成使用其它方法时对某个属性判准率相对其它属性总是较低的问题。
其他文献
偏题言语(off-topic verbosity)是指一系列比较展开的、联系不那么紧密的记忆中往事的回顾,这些往事的回忆使得言语从概念上与初始刺激越来越不相关,从而使得序列一致性降低。
公共物品困境发是当个人利益和集体利益发生冲突时,个人理性导致集体非理性的现象。影响人们在公共物品中人们的合作行为的因素很多,比如说人格,制裁机制,社会价值取向等。其中制
研究目的:本研究基于心理弹性理论制定了自编的北京流动儿童心理健康干预方案,并通过对包括心理弹性相关保护性因素(流动相关期待、文化自我效能感、情绪管理自我效能感、不公
汽车液压制动系统主要由制动踏板、助力器、制动总泵、液压管路及车轮制动器等组成。汽车制动时,踩下制动踏板后,推动助力器控制阀推杆向前移动.助力器产生助力作用后推动制动主
本研究以山东省淄博市的小学学生和教师为被试,以小学随班就读学生的教师支持水平为研究内容,从随班就读学生感知到的、教师认知到的教师支持两个方面探讨了教师支持水平的现
中国电工产品认证委员会电工设备分委员会rn二年七月rn一、依据rn1.《中华人民共和国产品质量法》;rn2.《中华人民共和国产品质量认证管理条例》;rn3.《中华人民共和国产
灵性,是一种重要的人格特质。它是决定个人存在与发展的整体因素中不可分割的一部分。它影响行为,关系到存在与体验,涉及的是对更高价值、内心自由与人生意义的追求。本研究以大
此次成都之行,笔者也一同加入到了佛吉亚志愿者的行列,在孩子们的欢声笑语中,感受到了佛吉亚人的责任与爱心;并与佛吉亚中国区人力资源副总裁孙思群女士展开对话,共同探讨践
2001年美国麻省理工学院启动了开放课件(MITOpenCourseWare)计划,引发了一场以名校公开课为标志的国际高等教育资源开放与共享运动。到2010年,美国麻省理工学院的相关课程资源
择业和就业与社会的发展和个人的幸福感息息相关,它是我们每一个人一生中都要面临的重大课题。当今社会就业压力很大,对于个人职业选择和发展来说,尽早地进行职业生涯探索是非常