基于表现性证据的合作评分过程研究——以教师评价素养的测评为例

摘要

表现性评价方法在当前素养测评的研究中处在越来越重要的地位，但是在以往研究中，表现性评价的结果往往具有较低的信度和效度，而本研究旨在开发一个基于表现性证据的合作评分的方法，从而提高表现性评价的质量。本研究以评价素养的测评为例，招募两名评分者，根据已开发的指标框架和评分规则，对10名教师的评价素养表现性证据进行评分，并从量化分析与质性分析两个层面，分别分析合作评分的质量和过程。研究结果表明，合作评分较之传统的背对背评分具有相对较高的效度和信度。在此过程中，评分被认为是证据—论点—主张之间的动态关系。通过评分者与证据、证据与评价标准、证据与证据之间的互动与解释，合作评分能够有效提高表现性评价的质量。