(一)英语阅读测试中认知诊断的研究方法及过程
目前在英语语言测试领域,认知诊断的研究以诊断听力和阅读能力为主,并逐渐进入对写作的诊断研究。就阅读而言,最早的关于英语阅读测试的认知诊断研究可以追溯到上世纪90年代。Sheehen( 1993) 曾于1993年在美国教育考试服务中心( Educational Testing Service,ETS) 发表关于应用规则空间模型来诊断美国青少年文本加工技能的报告。随后,Buck(1997)应用规则空间模型诊断了托业( TOEIC) 考试阅读试题的认知属性。Kasai(1997)和同事对阅读理解多项选择题进行了认知分析研究,对托福考试阅读理解部分重新进行了认知属性分析。2009年,Jang应用融合模型对设计用于学生的学术英语技能、帮助新托福考试的系统锋利英语(LanguEdge)考试阅读试题的认知属性进行了认知诊断。同年,Lee和Sawaki( 2009) 应用GDM模型、融合模型以及潜在分类模型分别对托福考试的阅读和听力试题的认知属性进行了认知诊断。到了2015年,Kim( 2015)用融合模型对成人二语分班阅读考试进行了认知诊断研究。然而,中国对英语阅读测试的认知诊断研究还不是很多。蔡艳等人(2011)运用属性层次模型对中学生阅读能力的认知属性进行诊断。赵冠芳、陈慧麟、陈劲松(2013)分别应用了G-DINA 模型框架中的补偿模型和饱和模型对国际学生评估项目(Programme for International Student Assessment,PISA)阅读测试进行了认知诊断。李瑞、吴茜媛(2014)利用认知诊断测量技术及数字化技术(网络多媒体技术)开发了以英语阅读为切入的动态诊断评估与学习策略干预指导为一体的自主学习数字化在线应用系统。杜文博、马晓梅(2018)运用认知诊断测评技术,结合树回归分析,采用量化与质化相结合的方法研究了英语阅读认知诊断测评模型的构建。张玉美、罗少茜(2018)采用认知诊断模型对八年级学生英语阅读能力的优劣势进行了分析和信息反馈。
综上所述,英语阅读测试的认知诊断是目前认知诊断研究的重要课题。认知诊断技术的发展促进了英语阅读测试和阅读技巧的研究。反过来,英语阅读测试和技能的研究又促进了关于新型认知诊断模型的开发。
(二)英语阅读认知诊断测验的研究结果
迄今为止,发表了一批关于英语阅读的认知诊断研究的文章,不同的研究者关注的方面不同,因而对英语阅读理解问题的属性界定也不同。以下是从研究方法和技能两个方面对研究成果进行大致的梳理。
1. Kasai的研究结果
结合英语阅读理解的加工模型和阅读理解多项选择题难度的影响变量这两个方面的研究结果,Kasai (1997)在自己和同事对阅读理解多项选择题认知分析的研究基础上对托福考试中的阅读理解部分重新进行认知属性的分析,并识别出了16个认知属性,具体如下:
A1:低频词汇,指的是整篇文章中出现了较多低频词汇,考核的是对低频词汇的理解,对应编码加工。
A2:明确指示信息的位置,指的是问题在文章的特定部分被清楚指定出来,考核的是浏览文章特定部分的技巧,对应文本映射加工。
A3:重叠词汇指示信息的位置,指的是回答问题所需信息可以直接利用问题与文章相关部分的重叠词汇找到信息的位置,考核的是浏览文章找出题目中的目标词汇的能力。对应文本映射加工。
A4:信息在不明显的位置,指回答问题所需信息的文章部分不易找到,不存在明显的词汇重叠,或问题包含了对文章相关部分的解释,其考核的是等价语义表达的识别,图表语言的理解或识别推断能力,对应文本映射加工及编码加工。
A5:低频词汇,指正确选项中含有低频词汇,考核低频词汇的知识,对应编码加工。
A6:词汇重叠,指正确选项与文章相关部分存在词汇重叠,考核利用相似词汇获得正确答案的能力,对应文本映射加工。
A7:超出文章的范畴,指获得正确答案所需信息超出了文章清晰给出的信息,即需要做出推断和概括,总结和理解作者的意图、目的等,考核从给定信息做出推断,概括和总结的能力及理解作者的意图、目的的能力。对应文本映射加工。
A8:错误选项的合理性,指一个错误选项看起来很的合理,但实际上对正确选项而言它的意思太宽或太窄,考核理解文章和问题并准确剔除错误选项的能力,对应评估反应选项的真实性加工。
A9:理解句子间的关系,指利用一致性知识获取正确答案,如:代词,指代,关键词的重复,替换与迁移等的使用,考核利用各种一致性知识理解句子间关系的能力,对应一致性加工。
A10:修辞组织结构的知识,指问题所需的修辞组织结构的知识,如:论题的综述,主题句,观点的组织和信息流等,考核对文章组织结构的理解及利用这些知识获取正确答案,对应编码与一致性加工。