《作文自动化评价手册：当前应用及必威体育精装版发展》评介.pdfVIP

2014年第 1期 外语测试与教学 ForeignLanguageTestingandTeaching [中图分类号]H319 [文献标识码]E [文章编号]2095—1167(2014)01—0061—04 《作文 自动化评价手册 ：当前应用及必威体育精装版发展》评介 王 华 MarkD．ShermisJillBurstein(eds．)．2013．HandbookofAutomatedEssayEvaluation：Current ApplicationsandNew Directions．New York London：Routledge．Xii+361pp．ISBN：978—1— 84872—955—7(hbk)． 近年来，自动化评分已成为语言测试研究的热门领域。2003年，ShermisBurstein推出 了 《作文 自动化评分：跨学科视角》一书，在语言测试界引起了巨大反响，推动了这一领域的进 一 步发展。经过十年的发展，作文 自动化评分究竟发展到了何种地步，哪些是作文 自动化评分 的热点研究，作文 自动化评分还有哪些未解决的课题，未来的发展方向是什么呢?Shermis和 Burstein合编的新著 《作文自动化评价手册：当前应用及必威体育精装版发展》一书全面、系统、深入地向 读者解答了这些问题，呈现了这一领域的全貌。本文将对该书的主要内容及特色进行简要评 介，以飨读者。 1．内容简介 全书共20章，除第 1章 “引言”和第20章 “政策转向带来的挑战和机遇”外，其余18章可 以分为四部分。 第 1章作为本书的引言，界定了 “作文 自动化评价(automatedessayevaluation)”这一概念 的内涵和外延，区分了作文 自动化评价和作文 自动化评分 (automatedessayscoring)，简要介绍 了人们对引入作文 自动化评价系统的顾虑，回顾了作文 自动化评价软件的发展历史。最后，作 者对本书构成做了简要的说明。 第一部分共2章(第2—3章)，主要从写作研究者的视角探讨了作文 自动化评价。写作教 学专家认为，写作教学虽已进人数字化时代，但写作仍是一个复杂的社会认知构念，写作是传 递信息、表达思想的过程，是社会活动的产物，因此写作应该由人来评价，而不是机器。但第2 章作者认为，如果 自动化评分系统能比较全面地反映写作构念，用机器辅助教学，用机评分做 分班决定也是不错的选择。作者用他们学校使用美国教育考试中心研发的Criterion系统的例 子证明这一点。当然，使用机器评分也有不足之处，比如，随着使用机评分时间的推移，考生写 作得分的均值一直在下降。作为二语写作研究领域的顶级专家，Weigle在第 3章中指出，作文 自动化评价技术在二语写作领域应该有更加广阔的应用空间。同第一语言写作不同，二语写 作更重视考察学习者的语言能力，尤其是学习者对语言结构、词汇和连贯性等的掌握。作文 自 动化评价技术在二语写作中更适合课堂评估，可以给学生 自动反馈(automatedfeedback)，帮助 衷心感谢曾用强教授在本文写作过程中的悉心指导。 · 61 · 外语测试与教学 2014年第 1期 提高学习。 第二部分共6章(第4-9章)主要介绍现有 自动化评价系统的工作原理及相关的实证研 究。第4-6章分别介绍了美国教育考试 中心的e．rater，培生知识技术公司的theIntelligentEs— sayAssessor(IEA)和卓越学习公司IntelliMetric的作文 自动化评价系统的工作原理以及其相关 的实证研究。第 7章详细介绍了作文 自动化评价系统在西弗吉尼亚州终结性评估和形成性评 估中的应用，以及教师对使用作文 自动化评价系统的影响。以上介绍的系统是各个领域专家 共同研发的结果，这些系统因其复杂性和受知识产权保护等原因，使得非专业技术人员无法将 自己对 自动化评分的想法付诸实践。第8章介绍的是一款为非专业技术人员研发的开源系统 LightSIDE。作者简要介绍了LightSIDE的运行原理，以及在整体评分、特质评分和合作学习三 方面的应用。第9章阐述了美国教育考试服务中心研发的c—raIer一 简答