作文自动评分技术 ( AES, Automated Essay Scoring) 是计算机给作文评价和评分的技术[1],自1966年美国杜克大学的Ellis Batten Page开发出PEG(Project Essay Grade)的第一个版本以来,自动作文评分系统的研究与应用在国内外已成为计算机辅助外语写作教学的热点。AES在国外最具代表性的五类六种作文自动评分系统是:注重语言形式的PEG、注重作文内容的 IEA、二者兼顾的 E-rater、发挥人工智能技术的 IntelliMetric、基于文本分类技术的Larkey和 BETSY[2] 。另外,从E-rater 发展出来的Criterion和从IntelliMetric 发展出来的My Access都是基于互联网的作文评分和评价服务系统,其设计思想是为学校和个人提供一个提高英语写作水平的途径。它们提供了一个写作平台,供学习者用于诊断作文中的语法和词汇用法等错误,使学习者迅速得到反馈和诊断报告,学习者可以根据这些反馈修改自己的作文,改进写作技巧。除运用于学习者写作练习以外,E-rater 已于1999年起用于GMAT作文评分,于 2005年开始应用于托福考试的作文评分。[3] (p137)
国内在AES方面的研究早期主要是对国外几个主要AES 系统的介绍[2][4][5][6],近几年的研究多为针对国内外几个主要自动评分系统评分方法的研究[7][8][9][10][11]];对自动评分系统评分信度和效度的研究[3][12[13][14][15]。目前国内开展的自动评分系统实证研究以采用句酷批改网和冰果的数据居多,研究对象多为大学生的英语作文,很少涉及高中生的作文,关于高中生作文自动评分的信度和效度的实证研究更是鲜见。