写作测试广泛应用于国内外语言测试中。为准确评估学生的写作能力,往往需要人工评分。一般而言,学生所得分数即为衡量其写作能力的指标。然而,以往研究发现,写作评分影响因素颇多,如写作任务、评分方法、评分标准和评分员自身背景等,这不仅对写作评分信度、效度和公平性造成影响,更会导致学生和学校在时间与资源上的严重浪费。因此,在写作测试领域,如何提高评分员评分信度与效度,成为教师、研究者和其他利益相关者关注焦点之一。本研究基于概化理论,从天津某高校大二英语专业写作课程期末测试中选取了10个水平不一的样本,并邀请若干院校12名大学英语教师对所选样本先后两次分别于两个评分情境下评分,其中6名有参与大型测试（如大学英语四、六级;英语专业四、八级;高考英语等）写作评分经历,6名无此经历,通过对不同评分情境和有不同评分经历的评分员的评分结果进行分析,以探究评分情境和评分经历对我国大学生英语写作评分信度和效度的影响。研究发现:（1）评分员在不同评分情境中,其评分结果不存在显著差异,聚合效度、区分效度及信度存在较小差异;值得注意的是,在两次评分情境中,评分员整体聚合效度、区分效度及信度都较低,评分质量较差;（2）有不同评分经历的评分员的评分结果在两个评分情境下均存在显著差异,有参与大型测试写作评分经历评分员其聚合效度、区分效度及信度在两个评分情境下均高于无此评分经历的评分员。研究结果表明,评分情境对评分员的写作评分质量不会产生显著影响;但评分经历,尤其是参与大型测试写作评分经历,对写作评分质量有明显影响。研究结果有助于提高高校外语教师对写作评分准确性的认识,并增强其对自身语言测评素养的关注;同时,也可为教师或政策制定者提供有用信息与建议,以提高课堂写作测试信度与效度,进而提高英语写作教学效果。