大学英语写作教学中应用自动作文评分系统的实证研究

302020年42期总第534期ENGLISH ON CAMPUS在线自动评价系统在大学英语写作中的应用——以批改网为例文/罗 莉 胡 丹引言写作自动评价系统起源于20世纪60年代，国外对其的研究主要集中在三方面：一是研究机器评分与教师评分是否一致，即对系统本身效度的研究；二是研究自动评价系统对写作水平影响，由系统开发公司进行, 多采用成绩对比的量化研究方法，得出的结论都比较积极，即系统有利于提高学生的成绩；三是该系统在课堂教学中的应用研究。

国内学者唐锦兰(2011)对写作自动评价系统的应用研究做了述评；蒋学清(2011)认为，写作自动评价系统 WritingRoadmap 2 .0(由美国麦格劳-希尔教育测评中心研发)在发展非母语英语学习者的写作能力方面能发挥积极作用；何旭良(2013)阐述了我国研发的自动作文评价系统——句酷批改网的工作原理及评分信度；石晓玲(2012)探讨了批改网的利与弊，研究了该系统对学生英语写作能力发展的积极影响；杨晓琼、戴运财(2015)认为自动评价系统弥补了传统写作教学的不足。

在线自动评价系统在英语教学中得到了广泛应用，它能给师生提供方便，有必要做进一步探究，以更好地将该系统应用于英语写作教学。

一、研究设计1. 研究问题。

本研究以批改网为例，旨在探讨在线自动评价系统对非英语专业学生写作能力的影响，具体分析讨论以下问题：第一，该校学生对自己写作能力的自我认同度如何；第二，学生对批改网的认同度如何；第三，基于批改网的自我修改与同伴反馈对学生作文分数的提高是否有促进作用？2. 研究对象。

本研究抽取了武汉某高校经济学院二年级一个班级共33人，开展为期一个学期的作文训练研究。

学生每两周在网上提交一篇作文，并利用批改网的自动反馈功能自主修改，然后通过老师设置的同伴互评模式相互评阅作文。

八篇作文训练题目均来自历年的四六级考试真题，主题都与学生的学习、生活息息相关。

在写作前，老师对针对写作任务，创设课堂情境，帮助激活学生相关知识；作文完成后，老师在课堂上作点评与讲解。

第４０卷第１期教学研究Ｖｏｌ ４０Ｎｏ １２０１７年１月ＲｅｓｅａｒｃｈｉｎＴｅａｃｈｉｎｇＪａｎ．２０１７作文自动评价系统在大学英语写作教学中的实证研究以句酷批改网为例李㊀霞㊀钟兰凤（江苏大学外国语学院，江苏镇江２１２０１３）㊀［收稿日期］㊀２０１６⁃０５⁃２２㊀㊀㊀［基金项目］㊀国家社科基金项目（１４ＢＹＹ０７４）；江苏省社科应用研究精品工程外语类课题（１６ｊｓｙｗ⁃３３）㊀［作者简介］㊀李霞（１９８２⁃），女，湖北荆州人㊂讲师，硕士，主要研究方向为二语习得㊁应用语言学㊂㊀㊀［摘㊀要］㊀作文批改与反馈是英语写作教学的重要一环对提升学生的大学英语写作水平的作用不可低估，以教育部高等学校大学外语教学指导委员会‘大学英语教学指南“（征求意见稿）中有关教学模式改革的相关精神为指导，以基于语料库和云计算的句酷批改网为例，通过实证研究探讨自动评价系统在大学英语写作教学中的有效性㊂研究发现㊂批改网反馈及时能提高写作反馈成效，减轻教师作文评阅压力，激发学生自主写作热情，提升其写作水平，这是改进现有英语写作教学模式的有效手段㊂但研究也显示该系统存在一些不足，还需要不断更新与完善，在此基础上为作文自动评价系统的改善提出了一些建议㊂㊀㊀［关键词］㊀自动评价系统；大学英语写作；批改网；反馈；语料库㊀㊀［中图分类号］㊀Ｇ６４２．４㊀㊀［文献标识码］㊀Ａ㊀㊀［文章编号］㊀１００５⁃４６３４（２０１７）０１⁃００５７⁃０５０㊀引言㊀㊀近年来我国高校不断扩招，学生人数众多，师资紧张，作为基础课的大学英语普遍采用大班化教学模式，根据国家教育指导委员会２００８年的调查，常规本科生与教师的比例为１４８ʒ１［１］㊂大学英语教师面对庞大学生群体，对学生作文评阅存在任务重㊁效率低㊁反馈不及时㊁主观性强等诸多问题㊂张雪梅认为由于反馈质量及针对性不强等问题，我国二语写作普遍存在着费时㊁低效的现象［２］㊂教育部高等学校大学外语教学指导委员会在‘大学英语教学指南“（征求意见稿）（以下简称‘指南“）为大学英语写作教学模式改革指明了方向㊂‘指南“［３］指出 大学英语应大力推进最新信息技术与课程教学的融合，继续发挥现代教育技术，特别是信息技术在外语教学中的重要作用㊂大学英语教师要与时俱进 在具体的课堂教学设计与实施过程中，融入并合理使用信息技术元素 ㊂作文自动批改系统（ａｕｔｏｍａｔｅｄｅｓｓａｙｓｃｏｒｉｎｇ，ＡＥＳ）通过人工智能㊁网络技术及语料库技术对作文进行自动评价，其发展为基于计算机和网络技术的教学模式改革提供了新的视角㊂在国外，这种系统已在托福㊁ＧＭＡＴ㊁ＴＷＥ等重大考试的写作评估中广泛使用㊂国内学者也陆续重视此系统的研究，并自主研发出了一些写作智能反馈平台㊂如句酷批改网㊁冰果英语智能作文评阅系统等㊂由于计算机自动评价系统在我国投入使用的时间不长，对这些平台的使用效果，国内目前还缺乏系统性研究㊂本研究拟尝试在‘指南“指导下，利用计算机和网络技术，以笔者执教的学生为实验对象，对作文自动批改系统在大学英语写作教学模式改革中的效果及影响进行深入探析㊂１㊀文献综述１．１㊀国外自动评价系统所谓作文自动评价系统（ＡＥＳ），就是利用计算机和网络技术对作文进行评估与评价㊂国外的作文自动评价系统比国内起步早㊂美国杜克大学于１９６６年开发出第一套作文自动评价系统ＰＥＧ（ｐｒｏｊｅｃｔｅｓｓａｙｇｒａｄｅｒ）㊂此后，人们采用统计㊁自然语言处理及人工智能等方面的最新成果，使该项技术得到了长足发展㊂目前在国外投入使用且比较成熟稳定的自动评价系统除ＰＥＧ外，还有ＩＥＡ（ｉｎｔｅｌｌｉｇｅｎｔｅｓｓａｙａｓｓｅｓｓｏｒ）㊁Ｅ⁃ｒａｔｅｒ（ｅｌｅｃｔｒｏｎｉｃｅｓｓａｙｒａｔｅｒ）㊁ＩｎｔｅｌｌｉＭｅｔｒｉｃＴＭ㊁ＨｏｌｔＯｎｌｉｎｅＥｓｓａｙＳｃｏｒｉｎｇ. All Rights Reserved.５８㊀教学研究２０１６等㊂ＰＥＧ比较注重语言形式，ＩＥＡ则注重作文内容，而Ｅ⁃ｒａｔｅｒ既重形式又重内容［４］㊂ＩｎｔｅｌｌｉＭｅｔｒｉｃＴＭ㊁ＨｏｌｔＯｎｌｉｎｅＥｓｓａｙＳｃｏｒｉｎｇ更为先进，能从写作的各个角度，如遣词造句㊁内容体裁㊁语体语法㊁组织结构以及写作格式等分析学生的错误㊂然而以上评价系统均为英语为母语的学生而设计，对于我国二语习得者，国外现有的研究成果不一定适用，因此将开发符合中国国情的作文自动批改系统提上日程㊂１．２㊀国内自动评价系统国内关于计算机自动评价系统的研究起步较晚，但也取得了一定的成绩㊂如梁茂成教授团队研发的 大规模考试英语作文自动评价系统 于２００５年申请了国家专利，得到了许多知名学者的肯定㊂有些企业也开发了此类软件，如句酷批改网及冰果英语智能作文评阅系统㊂冰果侧重作文整体评价，不指出文章的细节错误，只给出最后得分和评语㊂目前，国内多所高校正推广使用基于语料库和云计算的句酷批改网（ｔｈｅｐｉｇａｉｓｙｓｔｅｍ），它是一种以ＳＡＡＳ（软件即服务）的方式为教师和英语学习者提供英语作文网上智能批改的系统，具有反馈及时㊁按句点评㊁抄袭检测㊁提供进度报告等优点㊂１．３㊀反馈理论Ｕｒ［５］认为反馈在教学环境里通常指为了改进㊁提高学生的学习效果而对其某一学习任务完成情况发回的信息㊂在写作领域，反馈是读者向作者提供修改作文的信息㊂有效的写作反馈能帮助学生发现自己写作中的盲点及不足，促使其对作品进行反省和改进，最终提高写作水平㊂国内外学者从不同角度对反馈进行了大量调查研究㊂根据反馈的来源，反馈可分为教师反馈㊁同伴反馈以及计算机反馈㊂有些学者对教师反馈进行了深入探索，相关研究发现教师反馈对学生英语写作水平的提高起着重要的促进作用［６⁃７］㊂同伴反馈与英语写作有着正相关的关系，能够校正学生写作动机，培养批判性思维及分析技能，转变写作态度，提高读者意识，形成学习社群［８⁃９］㊂然而，也有研究者对同伴反馈提出了质疑，认为由于自身水平的限制，学生对作文表层语法等方面的修改较多，而对深层篇章结构等方面关注较少，因而很少能提供高质量的反馈［１０］㊂随着科学技术的发展及计算机的普及，教育技术迅猛发展，计算机在语言教学中的作用日益增大㊂研究者顺应此趋势，提出了网络反馈方法㊂从网络资源利用㊁网络背景下的师生互动和写作软件开发应用等方面探讨了网络反馈对写作能力培养的重要作用［１１⁃１３］㊂然而，目前国内对作文自动评价系统在大学英语写作教学中的实证研究还不多，且缺乏系统性㊂２㊀研究设计２．１㊀研究问题本研究关注以句酷批改网（以下简称批改网）为代表的作文自动评价系统对提高大学生英语写作水平的有效性㊂具体探讨以下问题㊂１）与传统教师人工反馈模式相比，批改网提供的反馈是否能更有效地促进学生英语写作能力的提高？２）批改网是否能更好地培养学生写作兴趣和自主写作意识？３）学生对批改网应用于大学英语写作教学的态度和评价如何？２．２㊀研究对象参与本次实证研究的对象是江苏省某重点院校非英语专业大一学生，共计１１８人，由两个不同的平行班组成㊂随机抽取一个班为实验班（６０人），教师通过批改网来辅助写作教学；另外一个为对照班（５８人），教师使用传统书面反馈模式指导学生英语写作㊂本研究对这两个班进行持续两学期的比较性研究㊂为避免影响实验的效度，学生并不知晓其正在参加教学方法实验㊂２．３㊀研究方法及工具本研究采用定量与定性研究相结合的方法㊂定量研究包括采用ＳＰＳＳ２２．０对两个班学生实验前后英语写作成绩以及问卷调查的封闭式问题进行统计，使用独立样本ｔ检验分析检测两班是否存在显著性差异㊂利用Ｗｏｒｄｓｍｉｔｈ６．０软件统计实验班与对照班后测作文语料；定性研究主要以教师平日观察记录以及问卷调查中开放式问题回答分析展开，以便进一步检验实验结果㊂本研究所应用的在线写作批改平台为比较成熟稳定的句酷批改网，其评价与人工评价基本一致率达到９１．５５％［１４］㊂批改网使用流程见图１㊂. All Rights Reserved.第６期李㊀霞钟兰凤作文自动评价系统在大学英语写作教学中的实证研究５９㊀图１㊀批改网使用流程图２．４㊀研究过程本研究分为以下３个阶段㊂１）实验前㊂选取笔者所带的两个班作为实验班和对照班㊂在开学初对实验班学生进行了批改网使用培训，以避免学生因不会使用该系统而影响其写作质量㊂２）实验中㊂本实验为期２个学期，共３０周㊂实验班和对照班由同一教师任课，课程设置㊁使用教材及教学进度一致㊂每完成一个课程单元则布置一篇与课文主题相关的作文㊂实验班学生利用批改网写作，根据系统反馈自行修改作文，修改次数不受限制㊂对照班则采取传统的人工评阅方式进行批改，教师鼓励学生根据反馈进行自我修改㊂３）实验后㊂收集并对比实验班和对照班的写作后测成绩，并将其与前测成绩进行对比分析，统计实验班与对照班后测作文语料信息，同时对学生进行问卷调查㊂３㊀结果与讨论通过两学期的教学实验，笔者利用ＳＰＳＳ２２．０对实验班与对照班的前测和后测写作成绩开展独立样本ｔ检验，使用Ｗｏｒｄｓｍｉｔｈ６．０软件统计实验班与对照班后测作文语料信息，结合问卷调查结果进行分析讨论㊂３．１㊀实验前作文成绩分析实验前，本研究对两班作文成绩进行了独立样本ｔ检验，结果如表１所示㊂表１㊀实验班与对照班作文前测作文成绩独立样本ｔ检验（百分制）组别人数（Ｎ）均值（Ｍ）标准差（ＳＤ）组间差异（ｔ值）显著性（ｐ值，双尾检验）实验班６０７３．８１７７．０６８７－１．４５５０．１４８对照班５８７５．９１４８．５４５６㊀㊀从表１可以看出，对照班的平均成绩比实验班高出２．０９７分，但两组写作成绩没有显著性差异（ｔ＝－１．４５５，ｐ＝０．１４８＞０．０５）㊂表明两个班学生作文水平相当，比较适合作为实验研究对象㊂３．２㊀实验后作文成绩分析实验后，本研究对两班作文后测成绩进行了独立样本ｔ检验，结果如表２所示㊂表２㊀实验班与对照班作文后测成绩独立样本ｔ检验（百分制）组别人数（Ｎ）均值（Ｍ）标准差（ＳＤ）组间差异（ｔ值）显著性（ｐ值，双尾检验）实验班６０８２．２３３４．３７６８４．１０７０．０００对照班５８７８．１５５６．２７３２㊀㊀表２表明，通过使用批改网进行写作辅助教学，实验班的平均成绩比对照班高出４．０７８分，且在统计学上这种优势显著（Ｐ＝０．０００＜０．０５）㊂与前测数据相比，两班成绩均有一定提升，但实验班学生作文成绩提高幅度明显高于对照班（提高幅度分别为８．４１６和２．２４１）㊂这说明在经过两学期批改网的使用后，实验班的学生成绩反超了对照班㊂３．３㊀实验后作文语料分析作文质量不能仅考察写作成绩，还应从诸如作文字数㊁词汇丰富度㊁句子长度等方面进行综合考察㊂表３是利用Ｗｏｒｄｓｍｉｔｈ６．０软件得出的实验班与对照班后测作文语料统计信息㊂表３㊀实验班与对照班后测作文语料统计简表ｔｅｘｔｆｉｌｅｆｉｌｅｓｉｚｅｔｏｋｅｎｓｔｙｐｅｓｓｔａｎｄａｒｄｉｚｅｄＴＴＲｍｅａｎｗｏｒｄｌｅｎｇｔｈｍｅａｎｓｅｎｔｅｎｃｅｓｌｅｎｇｔｈ（ｉｎｗｏｒｄｓ）实验班１３６５４１２０６３１５２４３５．１７４．９８１６．５４对照班１０８４５９５６１１１９２３３．５４４．４２１５．２８注：ＴＴＲ＝ｔｙｐｅ／ｔｏｋｅｎｒａｔｉｏ，ＳＴＴＲｂａｓｉｓ＝１０００㊀㊀从表３可以看出，实验班作文语料的库容量㊁形符㊁类符㊁标准化类符形符比㊁平均词长㊁平均句长等指标均比对照班作文语料大㊂实验班的库容量为１３６５４，而对照班为１０８４５，王初明等［１５］认为作文的长度可以作为写作质量的一个指标㊂全国大学英语四六级考试作文在字数上的不同要求也. All Rights Reserved.６０㊀教学研究２０１６反映了作文长度是评价写作能力的标准之一㊂标准化类符形符比可以用来反映词汇的丰富程度，比值越大，用词变化量越大㊂实验班的标准化类符形符比（３５．１７）大于对照班的数值（３３．５４），因此，实验班的学生用词变化更大㊂平均词长和平均句长能部分反映词汇及句子的复杂度㊂从表３的数据来看，对照班学生所写作文单词和句子较实验班来说都相对简单㊂综上可见，实验班通过使用批改网，其在作文分数㊁作文长度㊁词汇使用㊁句子长度等方面均比对照班占优势㊂３．４㊀学生调查问卷及结果分析为进一步检验实验数据结果，了解学生对自动批改系统的态度和看法，笔者在实验结束后对实验组的６０名学生进行了问卷调查㊂６０份回收问卷全部有效㊂问卷主要围绕以下两点展开：（１）实验班学生使用批改网后，学生的写作能力㊁写作兴趣及自主写作意识是否有变化？（２）实验班学生对批改网的评价如何？第一，多数学生对于使用批改网进行在线写作持积极肯定态度，认为自动批改调动了他们的自主学习积极性，激发了写作信心和兴趣㊂仅有５％左右的学生反对使用该系统㊂８３．３％的学生写作愿望加强㊂７０％的学生认为在批改网的帮助下语言错误数量减少㊂７５％的学生认为作文内容及词汇比以前更丰富㊂８１．７％的学生认为总体写作水平有了一定提高，这一点与本研究的实验结果一致㊂第二，大部分被试学生认为批改网有如下优点㊂（１）评阅迅速及时，给出客观翔实的评价报告，比教师批阅效率高㊂在线提交作文之后，系统会立即作出评价，给出分数，自动识别诸如拼写㊁词汇㊁搭配㊁语法等常见错误，给出修改建议并提供相关扩展训练㊁搭配推荐㊁参考例句等，学生能随时根据评价对作文进行多次修改，提高分数；（２）提供大量详实可靠的写作语料，帮助学生提高自主学习能力㊂６０％的学生会利用批改网中的语料库检索功能进行例句㊁语块㊁搭配㊁语段㊁知识点㊁同题材作文等检索㊂学生在真实的语言使用实例中自我发现㊁自我思考㊁探索语言规律，在语料驱动的学习模式（ｄａｔａ⁃ｄｒｉｖｅｎｌｅａｒｎｉｎｇ）下，提高自主学习能力；（３）档案系统高效方便㊂批改网为学生提供个人学习档案及学习日志，其提交的作文成绩轨迹及评价报告均保留在电子档案里㊂这对学生了解自身学习过程，掌握学习情况，进行反思非常有帮助；（４）师生交流更顺畅㊂教师可在我的网站 上传各种写作资料供学生学习㊂学生也可将自己遇到的问题发到批改网上的ＢＢＳ交流平台，与教师或其他学生一起探讨㊂６２％的学生喜欢这种师生㊁生生间的交流㊂第三，学生也指出了批改网在实际使用中存在的一些问题㊂（１）评语过于机械化且不够具体㊂这个结果和一些研究者的发现一致［１６⁃１７］㊂句酷网注重对学生作文的拼写㊁词汇及句法等方面的评价，对于写作的篇章结构㊁思想内容㊁逻辑㊁衔接与连贯性㊁批评性思维能力等方面反馈的意见较少，这也反映出计算机评价的一大缺陷，即在技术层面上没能像人一样去 欣赏 一篇文章［１８］；（２）批改网能指出一些语法结构错误以及学生常犯的 中式英语 ，但未给出确切修改意见，学生有时无法自己更正，需要教师给出具体反馈；（３）准确性有待提高㊂有些学生认为批改网不能准确评价作文的体裁，如学生将作文体裁写错，但仍可能得到较高分数㊂有些按句点评并未读完整个句子，武断地评价句子错误㊂因此对于批改网给出的作文分数不可盲目推崇，需客观看待㊂４㊀结束语作文自动评价系统是信息时代下英语教学与计算机技术相结合的产物㊂它的兴起极大地提高了作文批改效率，减轻了教师工作量，为学生提供了丰富的学习资源培养其自主学习能力，符合以学生为中心的教学理念㊂同时它可收集大量教学数据，详细记录学生个人学习档案，为英语教学㊁管理与研究提供了充足的资源㊂作为一种新型的在线英语作文评阅系统，批改网有利于促进外语教学朝着信息化㊁个性化和自主化方向发展，为大学英语写作教学改革提供了一个全新的视角，一定程度上代表了英语教学未来多模态的发展趋势，有着广阔的发展前景㊂但系统本身也存在一定的缺陷，如评语过于泛化㊁不能从批叛性思维等深层角度培养学生的写作能力等㊂ 把教育技术引入传统课堂并不是一个简单的工具运用问题，而是牵扯到教与学方方面面的系统性变革［１６］ ㊂因此，在大学英语写作教学中应构建多元反馈机制，将自动评价反馈与教师反馈㊁同伴反馈相结合，以弥补单一反馈模式的不足㊂同时，批改网应. All Rights Reserved.第６期李㊀霞钟兰凤作文自动评价系统在大学英语写作教学中的实证研究６１㊀大量搜集广大师生使用者的反馈意见，及时更新语料库，并与语言学家㊁教育学家共同协作，充分利用人工智能技术，进一步提高批改网的信度㊁效度㊁智能性和可操作性，使其在大学英语写作教学中发挥更长远的功效㊂本文以批改网为例，探讨了作文自动批改系统在大学英语写作教学中的应用及效果，由于条件的限制，本研究尚存在一些局限性㊂第一，实验工具只选用了目前被一些高校广泛使用的句酷批改网，得出的结论并不一定适用于其他作文自动评价系统；第二，调查的范围较小㊂笔者只选取自己所带的两个班级来进行实验，学生样本数量小且研究周期比较短㊂因此实验结果的普遍性有待进一步做大规模的实证性研究㊂英语写作是促进学生英语综合应用能力发展的有效途径，有利于培养学习者创新和批判性思维㊁跨文化交流等素养，充分体现了英语的工具性及人文性，是大学英语教学的重难点㊂笔者希望相关研究能成为打破英语写作教学瓶颈的一个新的突破口，更好地推动我国大学英语教学改革㊂参考文献１ 王海啸．大学英语教师与教学情况调查分析 Ｊ ．外语界２００９４ ６⁃１３．２ 张雪梅．大学英语写作教学现状之调查 Ｊ ．外语界２００６ ５ ２８⁃３２．３ 中华人民共和国教育部高等学校大学英语外语教学指导委员会．大学英语教学指南征求意见稿 ＥＢ／ＯＬ ．２０１５⁃０５⁃０６ ２０１６⁃０５⁃２２ ．ｈｔｔｐ ／／ｗｙｘ．ｚｚｉａ．ｅｄｕ．ｃｎ／ｓ／１１／ｔ／３３３／ｃ７／ｃ３／ｉｎ⁃ｆｏ５１１３９．ｈｔｍ． ４ 梁茂成文秋芳．国外作文自动评分系统评述及启示 Ｊ ．外语电化教学２００７ ５ １８⁃２４．５ ＵｒＰＡ．Ｃｏｕｒｓｅｉｎｌａｎｇｕａｇｅｔｅａｃｈｉｎｇｐｒａｃｔｉｃｅａｎｄｔｈｅｏｒｙ Ｍ ．Ｃａｍ⁃ｂｒｉｄｇｅ ＣａｍｂｒｉｄｇｅＵｎｉｖｅｒｓｉｔｙＰｒｅｓｓ １９９６ ２４２⁃２９４．６ ＣｈａｎｄｌｅｒＪ．Ｔｈｅｅｆｆｉｃａｃｙｏｆｖａｒｉｏｕｓｋｉｎｄｓｏｆｅｒｒｏｒｆｅｅｄｂａｃｋｆｏｒｉｍ⁃ｐｒｏｖｅｍｅｎｔｉｎｔｈｅａｃｃｕｒａｃｙａｎｄｆｌｕｅｎｃｙｏｆＬ２ｓｔｕｄｅｎｔｗｒｉｔｉｎｇ Ｊ ．ＪｏｕｒｎａｌｏｆＳｅｃｏｎｄＬａｎｇｕａｇｅＷｒｉｔｉｎｇ ２００３ １２３ ２６７⁃２９６． ７ 刘浩．交互性英语课堂教师反馈研究 以 个性化英语学习课程为个案 Ｄ ．天津南开大学２０１５．８ ＰａｕｌｕｓＴ．Ｔｈｅｅｆｆｅｃｔｏｆｐｅｅｒａｎｄｔｅａｃｈｅｒｆｅｅｄｂａｃｋｏｎｓｔｕｄｅｎｔｗｒｉｔｉｎｇ Ｊ ．ＪｏｕｒｎａｌｏｆＳｅｃｏｎｄＬａｎｇｕａｇｅＷｒｉｔｉｎｇ １９９９ ８ ３ ２６５⁃２８９． ９ 蔡基刚．中国大学生英语写作在线同伴反馈和教师反馈对比研究 Ｊ ．外语界２０１１ ２ ６５⁃７２．１０ ＬｅｋｉＩ．Ｃｏａｃｈｉｎｇｆｒｏｍｔｈｅｍａｒｇｉｎｓ ｉｓｓｕｅｓｉｎｗｒｉｔｔｅｎｒｅｓｐｏｎｓｅ／／ＫｒｏｌｌＢ．Ｓｅｃｏｎｄｌａｎｇｕａｇｅｗｒｉｔｉｎｇ ｒｅｓｅａｒｃｈｉｎｓｉｇｈｔｓｆｏｒｔｈｅｃｌａｓｓ⁃ｒｏｏｍ Ｃ ．Ｃａｍｂｒｉｄｇｅ ＣａｍｂｒｉｄｇｅＵｎｉｖｅｒｓｉｔｙＰｒｅｓｓ １９９０ ５７⁃６８． １１ ＷａｒｓｃｈａｕｅｒＭ．Ｎｅｔｗｏｒｋｉｎｇｉｎｔｏａｃａｄｅｍｉｃｄｉｓｃｏｕｒｓｅ Ｊ ．ＪｏｕｒｎａｌｏｆＥｎｇｌｉｓｈｆｏｒＡｃａｄｅｍｉｃＰｕｒｐｏｓｅｓ ２００２ １ ４５⁃５８．１２ 蒋学清蔡静唐锦兰．探析自动作文评价系统对大学生英语写作能力发展的影响 Ｊ ．山东外语教学２０１１６ ３６⁃４３． １３ 王颖李振阳．国外二语写作中电子反馈模式的研究评述 Ｊ ．外语电化教学２０１２１４６ １１⁃１６．１４ 张跃．设计产品一定要遵循两个 凡是 ＥＢ／ＯＬ ． ２０１１⁃０７⁃３１ ２０１６⁃０５⁃２２ ．ｈｔｔｐ ／／ｗｗｗ．ｃｓｄｎ．ｎｅｔ／ａｒｔｉｃｌｅ／２０１１⁃０７⁃３１／３０２４３１．ｈｔｍｌ．１５ 王初明牛瑞英郑小湘．以写促学 项英语写作教学改革的试验 Ｊ ．外语教学与研究２０００３ ２０７⁃２１２．１６ 唐锦兰吴一安．在线英语写作自动评价系统应用研究述评 Ｊ ．外语教学与研究２０１１ ２ ２７３⁃２８２．１７ 石晓玲．在线写作自动评估系统在大学英语写作教学中的应用研究 Ｊ ．现代教育技术２０１２ １０ ６７⁃７１．１８ ＰａｇｅＥＢ．Ｐｒｏｊｅｃｔｅｓｓａｙｇｒａｄｅ ＰＥＧ／／ＳｈｅｒｍｉｓＭＤ ＢｕｒｓｔｅｉｎＪＣ．Ａｕｔｏｍａｔｅｄｅｓｓａｙｓｃｏｒｉｎｇ ａｃｒｏｓｓ－ｄｉｓｃｉｐｌｉｎａｒｙｐｅｒｓｐｅｃｔｉｖｅ Ｃ ．Ｍａｈｗａｈ．ＮＪ ＬａｗｒｅｎｃｅＥｒｈａｕｍＡｓｓｏｃｉａｔｅｓ ２００３ ４３⁃５４．ＥｍｐｉｒｉｃａｌｓｔｕｄｙｏｎａｕｔｏｍａｔｅｄｅｓｓａｙｓｃｏｒｉｎｇＡＥＳｉｎｃｏｌｌｅｇｅＥｎｇｌｉｓｈｗｒｉｔｉｎｇｔｅａｃｈｉｎｇＢａｓｅｄｏｎｔｈｅｐｉｇａｉｓｙｓｔｅｍＬｉＸｉａ ＺｈｏｎｇＬａｎ⁃ｆｅｎｇＳｃｈｏｏｌｏｆＦｏｒｅｉｇｎｌａｎｇｕａｇｅ ＪｉａｎｇｓｕＵｎｉｖｅｒｓｉｔｙ Ｚｈｅｎｊｉａｎｇ Ｊｉａｎｇｓｕ ２１２０１３Ｃｈｉｎａ㊀㊀ＡｂｓｔｒａｃｔＦｅｅｄｂａｃｋｐｌａｙｓａｃｒｕｃｉａｌｒｏｌｅｉｎＥｎｇｌｉｓｈｗｒｉｔｉｎｇｔｅａｃｈｉｎｇ．Ｉｔｓｉｍｐｏｒｔａｎｃｅｔｏｈｅｌｐｉｍｐｒｏｖｅｓｔｕｄｅｎｔｓᶄｗｒｉｔｉｎｇｓｋｉｌｌｓｃａｎｎｏｔｂｅｕｎｄｅｒｅｓｔｉｍａｔｅｄ．Ｔｈｉｓｓｔｕｄｙ ｗｉｔｈｔｈｅｇｕｉｄａｎｃｅｏｆＣｏｌｌｅｇｅＥｎｇｌｉｓｈＴｅａｃｈｉｎｇｇｕｉｄｅｄｒａｆｔｖｅｒｓｉｏｎ ｆｏｒｍｕｌａｔｅｄｂｙＥＬＴＡｄｖｉｓｏｒｙＢｏａｒｄｕｎｄｅｒｔｈｅＭｉｎｉｓｔｒｙＥｄｕｃａｔｉｏｎ ａｔｔｅｍｐｔｓｔｏｔａｋｅｐｉｇａｉＳｙｓｔｅｍａｓａｎｅｘａｍｐｌｅｔｏｅｘｐｌｏｒｅｅｆｆｅｃｔｉｖｅｎｅｓｓｏｆａｐｐｌｙｉｎｇＡＥＳｔｏＥＦＬｗｒｉｔｉｎｇｔｅａｃｈｉｎｇ．ＴｈｅｒｅｓｕｌｔｉｎｄｉｃａｔｅｓｔｈａｔＡＥＳｎｏｔｏｎｌｙｈｅｌｐｓｔｏｒｅｌｉｅｖｅｔｈｅｈｅａｖｙｂｕｒｄｅｎｏｆｃｏｌｌｅｇｅＥｎｇｌｉｓｈｔｅａｃｈ⁃ｅｒｓ ｂｕｔａｌｓｏｈａｓａｐｏｓｉｔｉｖｅｅｆｆｅｃｔｏｎｅｎｈａｎｃｉｎｇｓｔｕｄｅｎｔｓᶄｗｒｉｔｉｎｇｃｏｍｐｅｔｅｎｃｅａｎｄｓｔｉｍｕｌａｔｅｓｓｔｕｄｅｎｔｓᶄａｕｔｏｎｏｍｏｕｓｗｒｉｔｉｎｇｅｎｔｈｕ⁃ｓｉａｓｍ．ＩｔｉｓａｎｅｆｆｅｃｔｉｖｅｍｅｔｈｏｄｆｏｒｉｍｐｒｏｖｉｎｇｔｈｅｔｅａｃｈｉｎｇｍｏｄｅｏｆＥｎｇｌｉｓｈｗｒｉｔｉｎｇ．ＳｏｍｅｄｅｆｉｃｉｅｎｃｉｅｓｏｆｓｕｃｈＡＥＳｓｙｓｔｅｍｈｏｗｅｖｅｒ ａｒｅａｌｓｏｒｅｖｅａｌｅｄｉｎｔｈｅｓｔｕｄｙａｎｄｔｈｕｓｓｏｍｅｓｕｇｇｅｓｔｉｏｎｓｗｅｒｅｐｕｔｆｏｒｗａｒｄ．ＫｅｙｗｏｒｄｓＡＥＳ ＥＦＬｗｒｉｔｉｎｇ ｔｈｅｐｉｇａｉｓｙｓｔｅｍ ｆｅｅｄｂａｃｋ ｃｏｒｐｕｓ. All Rights Reserved.。

英语作文电脑智能自动评分系统的使用和启示作者：杨学前来源：《教育界》2012年第30期【摘要】英语作文电脑智能自动评分系统是指对已经输入电脑的英语作文进行自动评分的电脑软件，是对人工评分的有力补充，可以大大提高教师的工作效率。

本人以IntelliMetric 系统为例，介绍目前智能评分系统的原理，为探索在我国各级各类英语教学和考试中使用智能评分系统提供一些依据和参考。

【关键词】英语作文自动评分系统在英语作文教学中，对学生作文进行批改一直被师生共识为提高写作能力的有效手段。

但是，考虑到时间、精力、作文收发等方面，又不得不承认效率不高。

在大规模语言考试中，作文又是必不可少的题型，阅卷工作量和阅卷的信度等问题一直以来都不能让我们如意。

针对这一难题，电脑智能自动评分系统提供了可以信赖、值得期盼的解决方案。

在PEG、IEA、E-rater、冰果、MY Access、IntelliMetric等几种智能评分系统中，本文选取IntelliMetric系统进行研究，对其评价标准进行理论分析，对其所评分的作文进行跟踪评析，发现其通过对学生作文按照若干评分标准问题进行回应和打分的方法能够快速、有效地解决了作文评分的效率问题，可靠性和准确性不亚于人工评分的水平，完全可以作为人工评分的补充手段。

由此看来，智能评分系统的发展值得期盼。

一、IntelliMetric系统概述IntelliMetric系统发布于1998年1月，是第一个提供给教育机构的智能作文评分软件，相比传统的人工评阅具有许多优点，如：准确度大于个人评分，尤其大于单人人工评分；提供即时反馈等等。

发布以后，系统得到了广泛的应用。

IntelliMetric系统作为一个智能评分系统，充分模拟了人工评分的过程。

系统开发时经过了大量的测试培训，即不断通过人工纠正其自动认定的给分点，直至契合。

值得提出的是，系统不是将所有的给分点简单地相加，而是通过分析给分点之间的聚合关系，模拟人工从整体上看待作文并给出判断，这一点上跟人工评分的过程是一致的。

大学英语写作教学中在线写作自动评价系统应用研究摘要：以冰果英语智能作文评阅系统为例，运用问卷调查、访谈以及对学生作文样本的分析等方法探索在线写作自动评价系统在大学英语写作教学中的应用效果。

结果表明，冰果智能评价系统总体而言为多数学生所接受且有较好的效果，但仍然有许多需要完善的地方。

在此基础上为在线写作自动评价系统在大学英语写作教学中的应用与研究提出建议。

关键词：写作自动评价系统;英语写作;效果英语写作教学一直是国内大学英语教学的一个薄弱环节，大学生的英语写作能力亟待提高［1］。

一方面，学生觉得英语写作很难，对写作有畏难情绪，另一方面，写作教师觉得教学效果不佳，费力教学很长一段时间却看不到学生水平的提高，尤其是作文批改成了他们最头痛的事情。

由于学生多,作文批改量大，批改周期长，使得学生英语写作机会相应减少，反过来又制约着学生写作水平的提高［2-3］。

在这种背景下，在线写作自动评价( Automated Writing Evaluation; Automated Essay Scoring)系统就应运而生，它的出现大大减轻了教师批阅作文的负担，增加了学生英语写作的机会，受到了广大师生的青睐。

写作自动评价系统进入实际应用阶段至今已有十多年的历史，尽管国内有学者也使用自动评价系统Writing Roadmap等进行写作研究［4-5］，梁茂成也研制了大规模英语考试作文自动评分系统EFL Essay Evaluator (EEE)1.0［6］，但目前国内使用较多的还是句酷英语作文批改网和冰果英语智能作文评阅系统。

关于写作自动评价系统在大学英语写作中的研究在国内并不多见。

唐锦兰等对该类研究做了述评，发现国内这一研究刚起步，偏重于介绍性、探讨性［3］。

对于该类系统在课堂教学中的应用和效果的研究比较少见。

葛诗利等探讨了大学英语作文自动评分研究中的问题及对策［7］；蒋学清等使用在线英语写作自动评价系统Writing Roadmap 2.0研究了自动作文评分系统对大学生英语写作能力发展的影响,发现形成性评价方式和具有自动反馈功能的在线写作工具在发展非母语英语学习者的写作能力方面可以发挥积极的作用［5］；石晓玲以句酷批改网为例研究了在线写作自动评改系统在大学英语写作教学中的应用, 着重探析了在线写作自动评改系统的有效性［8］；吴一安等研究了融入自动评价系统的英语写作实验教学对高校英语教师的影响，重点关注参与教师在写作教学中融入自动评价系统Writing Roadmap 的体验［4］。

基于自动评分系统的写作反馈对英语写作教学的启示①彭春菊，翁克山（海南医学院，海南海口571100）一、引言英语听说读写能力是衡量一个学生对第二语言掌握程度的重要标准，而写作能力又是学生掌握英语语言的综合体现，对学生的写作反馈是提高学生写作能力不可或缺的重要一环，学生得到有效的写作反馈对提高学生的写作能力、拓展学生的写作思路等具有积极的作用。

在大学英语教学中，由于教师时间有限、精力有限，难以对学生的写作提供详细、全面的反馈，更别说对针对每一个学生的写作问题给予针对性建议。

而自动评分系统的出现极大地弥补了这一教学短板，可以说是广大教师与英语学习者的福音。

自动评分系统是基于语料库、云计算和大数据的基础上完成的，对英语写作者可以从给分、点评等多维度进行反馈，学生根据反馈效果多次进行修改，教师也可根据自动评分系统给出反馈意见，弥补了系统的不足，有助于让学生写出满意的作品。

二、自动评分系统发展与研究概述随着计算机技术的发展，自动评分系统应运而生。

1966年，第一代在线评改系统PEG（Project Essay Grader）正式问世。

到了20世纪80年代，第二代自动评改系统The Writer’s Workbench问世，但只提供反馈意见，不给评分。

之后，更加完善的评分系统如雨后春笋般涌现出来。

我国的软件开发者应实际的教育需要开发出相关软件，这些软件为大学英语学习者解决了反馈不及时的问题，也给教师节省了大量时间。

自动写作评分系统是英语写作教学的一个良好平台，相当于学生每一次英语写作时，身边都有一位高级英语教师进行随时随地辅导，而且百问不厌，无论如何调整都能得到及时、客观的反馈。

近年来，特别是随着计算机进入“寻常百姓家”，高校也构建了以自动写作评分系统为平台的英语写作教学模式，为学生创造了一个基于自动评分系统写作反馈的现代化英文写作教学环境。

三、自动评分系统的反馈效果调查及改进方法（一）研究问题本研究的目的是大学生对批改网使用情况及使用后反馈效果进行调查，收集大学生和学生的反馈信息，对批改网目前的不足提出改进方法与建议。

写作自动评价系统在大学英语教学中的适用性研究吉林大学公共外语教育学院刘景珍滕薇薇【内容摘要】本文通过文献分析对写作自动评价系统进行甄别性的梳理,并结合对大学生所做的同侪采访发现:学生认为教学中写作机会少、对评分和反馈尚存疑虑,而教师也存在批改量大、标准一致性掌握困难以及批改非本族语的尴尬等情况,并揭示了写作自动评价系统的潜在适用性。

【关键词】写作自动评价系统大学英语写作需求调查一、引言依附于现代教育技术的写作自动评价系统的发展历程可追溯到上个世纪中叶,从PEG(Project Essay Grade),e-rater, Intellimerric,Intelligent Essay Assessor到本世纪初的衍生代产品: My Access,Criterion,Holt Online Essay Scoring,Writing Roadmap?以及各类提供免费批改的网站,这些软件技术的不断更新升级都致力于优化语言教学,为教育者和使用者提供更客观、便捷以及人性化的服务,与此同时也是给传统教学模式又一次革命性的洗礼。

二、写作自动评价系统简介及其在中国的发展现状在中国的语言教学中,写作自动评价系统的使用尚处于起始阶段,现存的写作自动评价系统一般都具有操作简便、多元智能、及时评分、反复修改、多次提交的功能。

它可以从五个维度(思想内容、篇章结构、词汇语法、句式运用、写作规范)提供四种题材(描述文、记叙文、说明文、议论文)作文的各级评估报告,为广大师生提供全方位的教学和科研支持,并逐步应用于全国性英语写作大赛,使广大教师受益颇深。

目前,有关写作自动评价系统应用于中国大学英语写作教学的相关文献以实证研究该系统软件辅助教学的居多:对大学生写作能力的影响、对高校教师的影响、该系统在中学英语教学和大学英语教学中的应用研究以及深入探讨该软件反馈功能的专题。

本文从大学阶段学生及教师的需求调查出发,从另一个新的角度重新审视了写作自动评价系统在大学教育阶段对辅助语言学习的必要性。

基于句酷批改网的大学英语写作教学实证研究1. 本文概述随着全球化进程的不断加速，英语作为国际通用语言的重要性日益凸显。

在大学英语教学中，写作能力的培养一直是教学的重点和难点。

传统的写作教学模式往往存在评价方式单反馈不及时等问题，难以满足学生个性化学习的需求。

为此，本文旨在探讨基于句酷批改网的大学英语写作教学模式对提高学生写作能力的影响。

句酷批改网是一款基于人工智能技术的写作辅助工具，它能够为学生提供即时的写作反馈和指导。

本研究采用实证研究的方法，通过对比实验组和对照组的数据，分析句酷批改网在大学英语写作教学中的应用效果。

本文首先介绍了研究背景和意义，随后详细阐述了研究方法、数据收集和分析过程，最后总结了研究结果，并提出了对大学英语写作教学的启示和建议。

通过本文的研究，我们期望能为大学英语写作教学改革提供有益的参考和实践指导。

2. 文献综述写作自动评价系统的研究始于上世纪60年代的美国，其发展经历了三个阶段。

第一阶段的PEG（Project Essay Grade）系统主要适用于大规模考试的评分，但对作文内容的关注不足。

第二阶段的IEA（Intelligent Essay Assessor）和Erater系统分析更加复杂，包含更多词法、句法及篇章结构元素。

第三阶段的My Access!、Criterion、Writing Roadmap等系统提供作文总分及分项分，并给出个性化反馈，但主要针对英语本族语学习者。

在国内，对写作自动评价系统的研究起步于本世纪初，且侧重于介绍性和探讨性。

近年来，国内学者在研制适合中国学生的英语写作自动评分系统方面进行了探索。

同时，也有学者对写作自动评价系统在教学中的应用进行了尝试，有的侧重探究其在英语教学中的应用模式，有的讨论其使用效果。

以句酷批改网为代表的英语作文自动批改网站提供了自动批阅、评分和错误标注等功能，帮助大学生和英语教师迅速发现英语作文中的错误，并及时进行解析和帮助。