情景判断测验(Situational Judgement Tests,SJTs)是人事选拔的一种评价技术,最早出现于1920年,近年来发展较快。该测验以较高的表面效度和较低的开发成本,在国内外的研究中越来越受到重视,并且被广泛地运用于各种人员测评考核中。本研究在“情景判断测验技术理论”的指导下,以省直机关处级领导干部为对象构建了“省直机关处级领导干部一般领导素质情景判断测验”,以便对机关领导干部的实践工作提供有用的评价工具。本研究由七个阶段的工作组成:(1)结合文献资料采用行为事件访谈方法收集典型的领导工作情景;(2)通过文献检索和综述并利用获得的行为事件构建党政机关处级领导干部的胜任素质模型;(3)根据素质模型,利用德尔菲法对所收集到情景的典型性水平进行评价,剔除、修改不合格的情景,初步合成选项收集问卷;(4)使用开放式问卷收集各种情境下的可能反应;(5)用德尔菲法对各种反应的典型性和代表性加以评价,剔除、修改不合格的反应;(6)进行初测,对测验的项目区分度、信度和效度进行统计分析,评价结果并修改测验;(7)正式施测,确定测验项目区分度、信度和效度的水平。研究采用克隆巴赫一致性系数和分半信度评价测验的信度水平;利用李娜编制的《中层领导职务公务员绩效自评问卷》、领导对处级干部工作绩效水平的评分以及被试近两年的工作绩效考核水平作为效标,来评价测验的效度水平。该测验由19个项目组成,其测验的一致性系数为0.830,分半信度系数为0.814,达到了心理测量学的要求;测验与自我效能感、工作绩效和拜访客户量的相关分别为0.369、0.355和0.326,均达到了显著性水平。本研究在理论上构建了机关领导一般领导素质模型,开发出“省直机关处级领导干部一般领导素质情景判断测验”,对我国省直机关处级领导的考评能够起到一定的帮助和推动作用。