论文部分内容阅读
【摘要】在线智能作文批阅系统越来越多地应用于大学英语写作教学实践中，是未来大学英语写作教学改革的发展趋势。本文旨在探究在线英语写作评价反馈的效度，研究发现，该系统的即时反馈可以激发大学生的英语写作兴趣，增加作文修改频次，引导学生重视写作的过程性，在词汇和语法维度的反馈给予学生的帮助较大，但在作文的思维逻辑和语篇结构的提升上影响有限。
【关键词】在线写作评价;智能批阅系统;多元反馈
【作者简介】耿娟娟 （1982.01-），山西临汾人，咸阳师范学院外国语学院，讲师，硕士，研究方向：英语写作教学。
【基金项目】本文是陕西省教育厅科研项目“在线英语写作自动评价反馈的有效性研究”（编号：18JK0821）的部分研究成果。咸阳师范学院骨干教师项目（编号：XSYGG201706），咸阳师范学院重点科研项目“‘一带一路’背景下陕西省非省会城市地方高校外语教师专业发展环境构建与模式研究”的研究成果。
一、研究背景
英語写作需要经过“写作—修改—再写作—再修改”的循环过程，这个不断修改的过程不仅是提高学生的读者意识和自我修改水平的关键，而且也是提升学生英语写作水平和能力的重要因素。但传统的大学英语写作教学中的反馈通常周期长，内容宽泛，学生大多只关注于作文的分数，对教师的反馈吸收得有限，无法真正从作文的反馈中提升自己的英语写作水平和能力。
目前大学英语写作教学的效能不高，课时有限，学生人数较多，教师精力有限。一般来说，一学期布置的写作练习次数普遍在4次左右，布置作业之后的一周收集上交，教师评阅批改，一周之后反馈给学生，这样一来一回就需要将近三周的时间。由于时间间隔太久，学生拿到教师的反馈比较关注分数或者等级，对于教师勾画出来的修改意见以及错误类型关注不够。这些因素都影响到大学英语写作反馈的有效性。
随着语料库和大数据等现代教育技术的发展，英语在线写作智能评阅平台越来越多地应用于大学英语写作教学实践中，自动智能批阅系统“提交即批改”的反馈有着针对性、即时性、个性化、可追踪性等优势，为解决目前大学英语写作反馈的相对滞后性提供了新的方向。所谓自动写作评分就是利用计算机技术对作文进行评估与计分。自动写作评估系统的研究可以追溯到20世纪60年代中期，研究者从教学方法论、教育测量学、认知科学及计算机语言学等多学科视角关注自动写作评估系统，但对自动作文评分系统的质疑批评之声一直不断。对自动作文评分最大的质疑就是作文评分是一项非常主观的高级智能活动，而机器实际上是不可能完全理解作文的。因此，将自动写作评估系统应用到写作教学中的研究出现了多种不同的声音。
将在线智能反馈应用到大学英语写作教学中，其有效性究竟如何，需要对此进行验证。因此本文将以句酷批改网为例，对英语在线智能批阅系统在大学英语写作教学实践中的有效性进行研究和探讨。具体回答的问题是：句酷批改网机器反馈对大学生英语写作能力发展有什么影响？
二、研究设计
本研究选取陕西省某师范学院进行数据分析，因为该院校于2017年开展了基于网络的大学英语教学改革，条件成熟，教师对于句酷批改网的使用方法较为熟悉，也在平时的教学中使用得比较频繁。我们选取的学年跨度从2018年9月开始到2019年7月结束，一年的教学实践结束后，随机选取200名学生发放《英语写作在线自动评价的反馈调查问卷》，实际回收有效问卷152份，回收率76%。另选取5名任课教师以及20名使用过该系统的大学生在问卷结束后进行了访谈。通过自行编制《英语写作在线自动评价的反馈调查问卷》，对152名使用了一学年句酷批改网的某师范院校非英语专业大学生和对5名英语教师、20名学生进行半开放式访谈来收集数据。
该问卷通过SPSS的项目区分度分析，所有项目均具有统计学上的显著性（.001），最终形成了由38个项目组成的封闭式问卷。问卷由四个部分构成，分别为：学生对“批改网”自动评分系统的看法、学生对“批改网”修改意见的态度、学生对“批改网”反馈的处理方式、学生所期望的“批改网”的回馈方式。全部采用5级李克量表，1表示完全不同意，2表示不同意，3表示不清楚，4 表示比较同意，5表示完全同意。该问卷的信度alpha系数为 .954， 具有较强的一致性，可以用来收集相关数据。
三、研究结果及讨论
第一，句酷批改网的机器反馈促进了大学生英语写作词汇量的提高，并且激发起学生对于英语写作的热情和信心。71.5%的受试大学生认为句酷批改网的机器反馈提高了词汇量，55%的受试者对于写作过程有了更为清晰的认识，46%的受试者增加了自主修改作文的意识，45%受试者表示更加热爱写作，对写作的信心也增强了。
在随后的对部分学生的访谈中，几乎所有受访者都明确表示批改网的即时反馈对于英语写作的帮助很大。批改网最大的优势是“提交即批改”，系统对学生作文进行大数据分析，可以立即辨别出学生作文在英语词汇、搭配、语法等方面的常见错误，实时给出反馈修改建议和欠缺知识点的补充，个性化地帮助学生“查漏补缺”。
第二，句酷批改网的在线反馈有助于提高大学生写作中词汇使用的准确性，有助于减少“中式英语”的表达。学生对批改网反馈意见的态度，55%的受试者认为修改意见可以提高自己对词汇理解和使用的准确性，反馈意见中包含同、近义词的辨析和重点词汇的固定搭配，通过结合语境的词汇学习，可以在很大程度上提高对词汇理解的深度。同样，约53%的受试者认为修改意见对于表达的地道性和文章的篇章结构有帮助。批改网通过大数据的比对，可以识别出表达的可接受性和地道性，从而帮助学生减少“中式英语”的使用。
第三，句酷批改网的及时反馈帮助学生增强了自我修改意识、读者意识，不断地审视自己的写作，从而重视写作的过程性。学生对批改网反馈的态度，近乎55%的受试者会根据反馈意见反复修改作文，会认真阅读反馈意见，从词汇、语法、句型、篇章布局、技术性细节（比如标点符号，大小写）等维度进行完善，直至得到一个满意的分数。 访谈中，学生们表示，为了得到更满意的分数，他们通常会修改5次左右，每修改一次，提交后，作文的分数就会提高一些，这样能带给他们很大的满足感，能深切地感受到自己的每次修改努力后的结果，不像之前都要等一周甚至更长的时间，才可以从老师那里得到作文的反馈。这样的做法从教师处也得到了印证。教师们普遍表示，从批改网的系统上可以看到学生修改后提交的次数，一般来说，一个班级的平均修改次数都在5-6次左右，个别学生的修改次数会更高，有的甚至达到了70次。某班级的学生，在一次完成作文的过程中，反复修改的次数从1次、5次、18次、48次到70次不等。可以看出，绝大部分学生依据批改网的反馈，不断提高自我修改意识，有了读者意识，不仅仅是停留在完成教师布置的作业这个层面，不仅聚焦作文的最终结果，而且在写作的过程中更关注于形成性。
但同时需要指出的是，批改网自身也有一定的缺陷。教师应充分意识到智能批改的局限性，尤其是在语篇结构和文章逻辑思维方面的反馈是十分有限的。因此，教师应在机器反馈的基础上，在语篇结构和逻辑思维等维度给予学生更多的指导。另外，在线上教学和学习指导的同时，教师也不能忽视同学生之间的情感交流及应有的学习监督。教师应发挥一定的监督管理作用，安排和组织学生积极参与写作练习和实践，不能随意复制粘贴去取得高分，引导学生正确地使用该系统，最大化地利用即时反馈的优势，提升写作水平和英语学习的自主性。
四、研究的不足与总结
英语作文评改系统在我国还处于初步探索阶段，对智能评改系统的理论研究还不是很成熟，本研究在研究设计方面虽然极尽严谨，但是在实施中还是发现有一些不足之处。
首先，本研究的研究样本是对某地方师范院校2018级152名大学生进行的问卷调查，以及对5名教师和20名学生进行的访谈数据，研究对象范围有些小，广度和推广性都有待继续探究，在多大程度上可以适用于其他院校的非英语专业大学生仍然有待验证。所以自动评分系统是否有效地提升了大学英语写作教学还需在更大范围内进行证实。
其次，本研究的调查工具是问卷和半开放式访谈，因为时间有限，未能充分地将其他形式的研究数据充分考虑在内。比如，学生多次修改的写作样本、教师布置的作文题目等。这些文本的深度分析，可以为研究结论的正确性提供更多的佐证。
最后，本研究验证了句酷批改网智能作文批阅系统的有效性，对于市面上其他智能批阅系统反馈有效性的验证需要进一步研究。比如面世的“冰果”英语智能作文系统，还有外语教学与研究出版社研发的 “iWrite” 英语写作与评阅系统。这些林林总总的智能评阅系统的信度如何？对同一篇文章的反馈在哪些方面存在共性和差异？对不同体裁文章是否存在反馈偏好？这些问题都有待后续的研究和探索。
总而言之，大学生对于批改网反馈的总体态度是积极的、肯定的，认为批改网的即时反馈促进了英语写作水平的提高，尤其是在词汇的广度和深度、语法的准确性、英语表达的地道性等方面。不仅如此，大学生对英语写作的情感态度维度也发生了积极的变化，由于“提交即批改”的即时性，极大地激发了学生对英语写作的积极性和热情，很大程度上减轻了学生英语写作的焦虑感，从而提高了自我修改的次数，增强了学生写作过程中的读者意识。因此，智能批阅系统的即时反馈对大学生英语写作水平的提升有很大的促进作用。
参考文献：
[1]Warschauer M，
【关键词】在线写作评价;智能批阅系统;多元反馈
【作者简介】耿娟娟 （1982.01-），山西临汾人，咸阳师范学院外国语学院，讲师，硕士，研究方向：英语写作教学。
【基金项目】本文是陕西省教育厅科研项目“在线英语写作自动评价反馈的有效性研究”（编号：18JK0821）的部分研究成果。咸阳师范学院骨干教师项目（编号：XSYGG201706），咸阳师范学院重点科研项目“‘一带一路’背景下陕西省非省会城市地方高校外语教师专业发展环境构建与模式研究”的研究成果。
一、研究背景
英語写作需要经过“写作—修改—再写作—再修改”的循环过程，这个不断修改的过程不仅是提高学生的读者意识和自我修改水平的关键，而且也是提升学生英语写作水平和能力的重要因素。但传统的大学英语写作教学中的反馈通常周期长，内容宽泛，学生大多只关注于作文的分数，对教师的反馈吸收得有限，无法真正从作文的反馈中提升自己的英语写作水平和能力。
目前大学英语写作教学的效能不高，课时有限，学生人数较多，教师精力有限。一般来说，一学期布置的写作练习次数普遍在4次左右，布置作业之后的一周收集上交，教师评阅批改，一周之后反馈给学生，这样一来一回就需要将近三周的时间。由于时间间隔太久，学生拿到教师的反馈比较关注分数或者等级，对于教师勾画出来的修改意见以及错误类型关注不够。这些因素都影响到大学英语写作反馈的有效性。
随着语料库和大数据等现代教育技术的发展，英语在线写作智能评阅平台越来越多地应用于大学英语写作教学实践中，自动智能批阅系统“提交即批改”的反馈有着针对性、即时性、个性化、可追踪性等优势，为解决目前大学英语写作反馈的相对滞后性提供了新的方向。所谓自动写作评分就是利用计算机技术对作文进行评估与计分。自动写作评估系统的研究可以追溯到20世纪60年代中期，研究者从教学方法论、教育测量学、认知科学及计算机语言学等多学科视角关注自动写作评估系统，但对自动作文评分系统的质疑批评之声一直不断。对自动作文评分最大的质疑就是作文评分是一项非常主观的高级智能活动，而机器实际上是不可能完全理解作文的。因此，将自动写作评估系统应用到写作教学中的研究出现了多种不同的声音。
将在线智能反馈应用到大学英语写作教学中，其有效性究竟如何，需要对此进行验证。因此本文将以句酷批改网为例，对英语在线智能批阅系统在大学英语写作教学实践中的有效性进行研究和探讨。具体回答的问题是：句酷批改网机器反馈对大学生英语写作能力发展有什么影响？
二、研究设计
本研究选取陕西省某师范学院进行数据分析，因为该院校于2017年开展了基于网络的大学英语教学改革，条件成熟，教师对于句酷批改网的使用方法较为熟悉，也在平时的教学中使用得比较频繁。我们选取的学年跨度从2018年9月开始到2019年7月结束，一年的教学实践结束后，随机选取200名学生发放《英语写作在线自动评价的反馈调查问卷》，实际回收有效问卷152份，回收率76%。另选取5名任课教师以及20名使用过该系统的大学生在问卷结束后进行了访谈。通过自行编制《英语写作在线自动评价的反馈调查问卷》，对152名使用了一学年句酷批改网的某师范院校非英语专业大学生和对5名英语教师、20名学生进行半开放式访谈来收集数据。
该问卷通过SPSS的项目区分度分析，所有项目均具有统计学上的显著性（.001），最终形成了由38个项目组成的封闭式问卷。问卷由四个部分构成，分别为：学生对“批改网”自动评分系统的看法、学生对“批改网”修改意见的态度、学生对“批改网”反馈的处理方式、学生所期望的“批改网”的回馈方式。全部采用5级李克量表，1表示完全不同意，2表示不同意，3表示不清楚，4 表示比较同意，5表示完全同意。该问卷的信度alpha系数为 .954， 具有较强的一致性，可以用来收集相关数据。
三、研究结果及讨论
第一，句酷批改网的机器反馈促进了大学生英语写作词汇量的提高，并且激发起学生对于英语写作的热情和信心。71.5%的受试大学生认为句酷批改网的机器反馈提高了词汇量，55%的受试者对于写作过程有了更为清晰的认识，46%的受试者增加了自主修改作文的意识，45%受试者表示更加热爱写作，对写作的信心也增强了。
在随后的对部分学生的访谈中，几乎所有受访者都明确表示批改网的即时反馈对于英语写作的帮助很大。批改网最大的优势是“提交即批改”，系统对学生作文进行大数据分析，可以立即辨别出学生作文在英语词汇、搭配、语法等方面的常见错误，实时给出反馈修改建议和欠缺知识点的补充，个性化地帮助学生“查漏补缺”。
第二，句酷批改网的在线反馈有助于提高大学生写作中词汇使用的准确性，有助于减少“中式英语”的表达。学生对批改网反馈意见的态度，55%的受试者认为修改意见可以提高自己对词汇理解和使用的准确性，反馈意见中包含同、近义词的辨析和重点词汇的固定搭配，通过结合语境的词汇学习，可以在很大程度上提高对词汇理解的深度。同样，约53%的受试者认为修改意见对于表达的地道性和文章的篇章结构有帮助。批改网通过大数据的比对，可以识别出表达的可接受性和地道性，从而帮助学生减少“中式英语”的使用。
第三，句酷批改网的及时反馈帮助学生增强了自我修改意识、读者意识，不断地审视自己的写作，从而重视写作的过程性。学生对批改网反馈的态度，近乎55%的受试者会根据反馈意见反复修改作文，会认真阅读反馈意见，从词汇、语法、句型、篇章布局、技术性细节（比如标点符号，大小写）等维度进行完善，直至得到一个满意的分数。 访谈中，学生们表示，为了得到更满意的分数，他们通常会修改5次左右，每修改一次，提交后，作文的分数就会提高一些，这样能带给他们很大的满足感，能深切地感受到自己的每次修改努力后的结果，不像之前都要等一周甚至更长的时间，才可以从老师那里得到作文的反馈。这样的做法从教师处也得到了印证。教师们普遍表示，从批改网的系统上可以看到学生修改后提交的次数，一般来说，一个班级的平均修改次数都在5-6次左右，个别学生的修改次数会更高，有的甚至达到了70次。某班级的学生，在一次完成作文的过程中，反复修改的次数从1次、5次、18次、48次到70次不等。可以看出，绝大部分学生依据批改网的反馈，不断提高自我修改意识，有了读者意识，不仅仅是停留在完成教师布置的作业这个层面，不仅聚焦作文的最终结果，而且在写作的过程中更关注于形成性。
但同时需要指出的是，批改网自身也有一定的缺陷。教师应充分意识到智能批改的局限性，尤其是在语篇结构和文章逻辑思维方面的反馈是十分有限的。因此，教师应在机器反馈的基础上，在语篇结构和逻辑思维等维度给予学生更多的指导。另外，在线上教学和学习指导的同时，教师也不能忽视同学生之间的情感交流及应有的学习监督。教师应发挥一定的监督管理作用，安排和组织学生积极参与写作练习和实践，不能随意复制粘贴去取得高分，引导学生正确地使用该系统，最大化地利用即时反馈的优势，提升写作水平和英语学习的自主性。
四、研究的不足与总结
英语作文评改系统在我国还处于初步探索阶段，对智能评改系统的理论研究还不是很成熟，本研究在研究设计方面虽然极尽严谨，但是在实施中还是发现有一些不足之处。
首先，本研究的研究样本是对某地方师范院校2018级152名大学生进行的问卷调查，以及对5名教师和20名学生进行的访谈数据，研究对象范围有些小，广度和推广性都有待继续探究，在多大程度上可以适用于其他院校的非英语专业大学生仍然有待验证。所以自动评分系统是否有效地提升了大学英语写作教学还需在更大范围内进行证实。
其次，本研究的调查工具是问卷和半开放式访谈，因为时间有限，未能充分地将其他形式的研究数据充分考虑在内。比如，学生多次修改的写作样本、教师布置的作文题目等。这些文本的深度分析，可以为研究结论的正确性提供更多的佐证。
最后，本研究验证了句酷批改网智能作文批阅系统的有效性，对于市面上其他智能批阅系统反馈有效性的验证需要进一步研究。比如面世的“冰果”英语智能作文系统，还有外语教学与研究出版社研发的 “iWrite” 英语写作与评阅系统。这些林林总总的智能评阅系统的信度如何？对同一篇文章的反馈在哪些方面存在共性和差异？对不同体裁文章是否存在反馈偏好？这些问题都有待后续的研究和探索。
总而言之，大学生对于批改网反馈的总体态度是积极的、肯定的，认为批改网的即时反馈促进了英语写作水平的提高，尤其是在词汇的广度和深度、语法的准确性、英语表达的地道性等方面。不仅如此，大学生对英语写作的情感态度维度也发生了积极的变化，由于“提交即批改”的即时性，极大地激发了学生对英语写作的积极性和热情，很大程度上减轻了学生英语写作的焦虑感，从而提高了自我修改的次数，增强了学生写作过程中的读者意识。因此，智能批阅系统的即时反馈对大学生英语写作水平的提升有很大的促进作用。
参考文献：
[1]Warschauer M，