网上作文自动评阅系统在英语专业写作教学中的应用研究——以批改网为例

徐 鑫，米晓丽

“互联网+”和“大数据”已成为时代的热词，互联网及移动终端正影响着人们的生活，改变着人们的思维方式。在互联网环境中成长起来的大学生更加依赖手机等移动终端，更喜欢使用微博、朋友圈等能够进行实时回复的网络工具，更倾向于用文字进行沟通与交流。这些特点使传统的“讲解—写作—反馈”写作课程教学模式不能够满足学生的学习需求，加之师生比严重失调这一目前高校存在的普遍问题，教师很难在完成几个班教学任务的同时仍然给出迅速、细致的反馈，写作教学的效果自然会受到影响，导致学生写作进步缓慢。网上作文自动评阅系统成为解决此问题有效平台。本文选取国内自主开发的网上作文自动评阅系统——批改网，探讨其是否能够提升英语专业写作课堂教学效果。

一、理论基础

建构主义理论。20 世纪中期，杜威(JohnDewey)、皮亚 杰(JeanPiaget)和 维 果 茨 基(LevVygotsky)等专家从不同层面阐述了建构主义的理论，倡导“以学生为中心”的教育理念。建构主义理论认为教学活动中应注重“情景创设”“协作学习”和“自主学习”，学习者在一定的社会文化背景下，在教师及学习同伴的帮助、支持和协作下，充分利用各种信息资源，最后进行意义建构获得知识。［1］写作学习本身就是一个建构的过程，在作文自动评阅系统中，学生可以以班为单位组成学习组，在网上进行互评，与教师进行互动，形成一个利用信息资源进行学习的过程。

自我效能感理论。班杜拉将自我效能感定义为“一种信念，即如果人们知道其行为会导致期待的结果且认为自己有能力完成必要的行为，他们就会成功执行某一任务”［2］。自我效能会激发学习者完成学习任务，形成长效的学习动机。自我效能感强的学习者会积极地采取措施完成学习任务。在写作教学中，学生的自我效能主要来自对写作任务的反馈，但在传统写作教学中，不论教师还是同伴的反馈都会受到一定的时空限制，自动评阅系统的反馈具有不受时空限制的优点，但其能够在何种程度上提升学习者的自我效能感仍有待研究。

二、网上作文自动评阅系统及批改网

网上作文自动评阅系统利用计算机技术对作文进行评估与记分，在评分过程中，采用了统计、自然语言处理及人工智能等方面的最新成果。其应用已经有近20 年的历史。目前，国外比较成熟的作文自动评阅系统有Project Essay Grade（PEG）、Intelligent Essay Assessor(IEA)、Electronic Essay Rater（E-rater）、IntelliMetric、Bayesian Essay Test Srocing System（BETSY）和Larkey的系统。［3］由于具有即时性、互动性等优点，越来越多的国内高校和教师个人用户开始关注并应用网上作文自动评阅系统。

批改网是我国开发的一款在线英语作文自动批改服务系统，包括学生平台和教师平台，学生可以通过系统实时获得作文得分，并依据系统评语自主修改作文。教师则可以获得基于内容相关、篇章结构、句子、词组搭配、词汇和流畅度6 个维度的学生个体作文评阅参考意见，以及学生群体作文相关统计数据。其操作理念是依托系统研发背后雄厚的语料库资源和计算机云技术支持，将学生的作文也就是中介语语料库与系统内置的英美本族语语料进行比对，看两者之间词频、句式的贴合程度，从而给出评阅结果。［4］批改网目前可以在电脑、手机、平板电脑等多终端运行。

三、研究设计

研究目的。旨在通过对数据及学生作文样本的分析讨论以下问题：第一，批改网对学生的写作能力是否有促进作用？针对不同水平的学生，其作用是否会有差异？第二，自动评分系统反馈能给学生什么样的帮助？是否与学生期待的反馈一致？

研究对象。实验研究对象为笔者所在学校英语专业二年级的两个自然班学生，共56 人。学生英语水平差异较大，大多数处于较高水平的初级学习者阶段，在写作时仍存在大量的语法和搭配错误，少数学生可以达到英语专业四级水平，也有少数学习者属于较低水平的初级学习者。目前英语写作课程共开设两学期，每学期32学时，每周2学时。

研究方法。整个实验过程为期6周，开始于二年级上学期的下半段。每周任课教师会利用批改网教师平台给学生布置一篇相当于大学英语四级难度的作文，学生利用手机终端在课下写作并上传到平台。每篇作文完成时间限制为一周，在规定时间内，学生可以无限次地修改。同时，教师利用批改网对学生的作文完成情况进行监控，并在下次上课时对其作文进行面对面点评。为了对比学生写作能力是否有提高，在实验开始前和结束后都对学生进行了测试。测试时仍以批改网为工具，但学生需统一在有网络的计算机房完成。为了保证两次测试题目难度相当，两次均采用大学英语四级写作真题，写作时间为30分钟，完成后以学生第一次提交的成绩为有效成绩。所收集到的数据都使用统计学软件SPSS 17.0 进行分析。同时，为了研究对学生写作学习动机的影响，本实验选取部分学生进行了半开放式的访谈，并将访谈录音进行转录及分析。

四、研究结果分析

第一，前测后测数据比较。表1 中显示的是实验前后两次测试的结果比较。两个班学生最后收集到有效数据50 组，通过均值的比较可以看出，后测平均分高于前测，但针对两次测试的T 检验结果并未发现二者之间存在显著差异。这样的结果很可能由于本次实验样本数量较少，并未达到一定的统计学意义。实验时间为期6 周，相对较短，也可能是并未发现显著差异的原因之一。但后测的平均分在一定程度上高于前测，这说明学生在6 周的时间内写作能力有一定的提高。由于两次测试均基于批改网的自动测评系统，可以推测，在实验时间内，学生的写作能力在批改网重点测量的几个要素上有所提升。然而，这样的假设还需要进一步的实验验证。

表1 前测后测平均分比较

此外，研究者依据学生的专业四级成绩把学生分为高分组（15 人）和低分组（15 人），并对两组学生的成绩分别进行检验，结果显示，高分组和低分组被试的差异也是体现在平均分上，两组的后测平均分均高于前测，但分别针对两组的T 检验也并未发现明显差异。可见，在批改网对不同水平学生的促进作用是否有差异方面，答案是否定的。

第二，提交次数比较。在后测结束之后，实验者又规定了一定的时间让被试再次修改论文并提交，并对提交次数和最终得分进行相关分析，得出学生的提交次数和成绩在0.05 的水平上相关，且Pearson 相关系数为正值（表2）。

表2 修改次数与修改后成绩的相关性

研究结果表明，学生在经过6 周的批改网实践后，其自主批改能力与作文水平呈正相关，也就是说，大多数学生可以根据批改网给出的修改建议进行作文的修改，并使修改结果朝着有益的方向发展。这与传统课堂上教师人工批改、学生被动接受反馈的方式不同，学生在提交作文之后得到的反馈是实时的、快速的，而且对作文的修改是主动的。数据呈现结果与半开放式访谈的结果相一致。学生A 在提及修改作文的态度时说道：“在网上修改作文好像玩游戏一样，每次改一个单词或一个句子，很快提交了，看到分数有变化，感觉很有成就感。”此外，对高分组和低分组学生批改次数的比较并未有显著性差异，也就是说，批改网自主修改建议对不同水平的学习者均有一定的效果。

第三，语言错误变化分析。图1是依据批改网数据对被试两次作文中出现的语言错误进行统计的柱状图。

图1 学生写作错误前测后测比较

数据显示，后测中50 名被试所提交作文的语言错误总数下降明显。最大的差异来自于拼写错误。在前测中，共出现110 次拼写错误，而后测中拼写错误为0。这样的结果极大地体现了自动评阅系统的优势。人工批阅时，教师不可能逐一挑出学生的拼写错误进行修改，而自动评阅系统可以在第一时间给学生正确的反馈。相比之下，动词错误和名词错误也有一定程度的减少。

第四，自动评阅系统对学习动机的促进作用。表3 依据批改网自动统计出的数据计算出每次作文修改平均值，已经排除了由于系统问题而产生的不正常提交次数。学生修改作文次数的总平均值为6.21，相比传统教学模式已经有了很大提高。在传统模式下，学生提交初稿——收到教师反馈循环中，学生至多有2～3 次的修改，同时耗时较长。学生B在访谈中提道：“有时老师发回的作文点评我并不是十分理解，好多作文上只是横线和圆圈，又没有勇气问老师。而批改网的反馈是很明确的，这样我就可以自己修改了。”学生C 也说：“写好的作文大约一个星期才能发回来，再拿到时已经忘记当时是怎样想的了，自己也懒得再去读一遍。”

表3 学生5次作文平均修改次数

由此可见，批改网的引入缩短了学生得到反馈的周期，能够在一定程度上促进学生对作文积极检查与修改，从而提升他们对自己语言发展的监控意识。

五、讨论

通过研究发现，批改网目前对写作教学的作用主要体现在以下方面。

第一，可以减轻教师的批改压力，把重心从纠正语言错误转到对学生语言发展的监控和有针对性的教学设计上。

第二，可以利用多平台的优势提升学生的学习兴趣。目前大学生的特点是手机不离身，与移动平台相结合的学习方式相对较为新颖，容易激发学生的学习兴趣。

第三，及时的反馈可以在一定程度上提升学生的自主纠错意识。在学生对所写作文还有印象时及时进行修改，可以提高学生的自我效能感。

第四，教师面对面批改仍是不可缺少的环节。批改网虽然能够针对一些较为典型的语言错误给出评价，但针对作文的主题、连贯与衔接等方面并不能有效反馈。而且学生在得到机器反馈之后，也期望教师能够给予“认可”式的评价以确定自己的写作能力是否有进步。

批改网等网上作文自动评阅系统给英语写作教学设计提供了新的可能，如何把网络与课堂教学相结合，使二者发挥最大的作用，是需要教师进一步研究的课题。