《表1 Knoch和Chapelle提出的评分效度验证框架中的推论和主张[19]》

  提示：宽带有限、当前游客访问压缩模式

本系列图表出处文件名：随高清版一同展现

《大学英语四级口语考试自动评分效度初探》

1. 获取 高清版本忘记账户？点击这里登录

1. 下载图表忘记账户？点击这里登录

Knoch和Chapelle在回顾相关研究的基础上，提出基于论证的评分效度验证框架[19]。该框架围绕评分结果、评分量表、评分员、评分过程等相关因素，提出评分效度研究的推论与假设，并为假设列出需要收集的证据，为口语或写作测试的评分研究提供了系统框架。表1为该框架的推论和主张（claim），其中主张是对推论的阐释，也是效度研究的起点，为后续收集效度证据提供了具体的假设，为效度研究提供指导。该框架通过评估（evaluation）、概化（generalization）、解释（explanation）、外推（extrapolation）、决策（decision）、后果（consequence)6个推论环节，将考试表现评估、分数可靠性、分数解释、分数外推性、分数使用及其后果等连接成一个完整的证据链。其中：评估和概化连接考试的观察分数和期望分数，在口语或写作等主观评分的测试中尤为关键；解释关乎分数所代表的能力构念，对构念效度论证十分重要。因此，评分效度研究须针对评分标准、评分过程以及分数含义建立假设，例如，评分等级的设置与考试目的契合性、评分标准的理论基础、评分员在评价考生表现时的决策过程、评分的稳定性等，这些是开展评分效度研究的主要意义所在。