文档介绍:第卷心理学探新年
,, ,"",
总第期第期
#, -89:;<*=>;?;***@9ABCD;:;’B ,
一个新的测量过程框架
———对引入认知加工模型的再思考
孙娟
(北京师范大学心理学院,北京)
!""#$%
摘要:从认知任务分析出发的测验设计,核心在于从认知加工的角度对项目底层作答机制
作出解释。其中,能够刻画任务难度的模型最有可能与心理计量模型相结合。因而,具备成熟难
度法则的各种小型理论或通用理论可以进入测量过程,实现从纯粹误差结构控制的测量到内容导
引的测量的转变。
在这样一个框架之下,理论对任务上作答过程的理解是否恰当,刺激特性变量与任务难度关
系的揭示(即难度法则)是否准确,可以在测量的过程中进行证伪。项目反应理论还未及很好回答
的效度问题,可望在这一拓展的框架中获得圆满解决。
本文为新的测量过程框架提供了一个示意图。
关键词:新的测量过程框架;测验设计;任务能力分析;难度法则;效度解决;证伪
&
中图分类号: 文献标识码: 文章编号: ( )
’(")"%! * !""+&%!#(,"",",&""(!&"%
当代视野下,心理测量学百年默默信奉的“让数据说话”的客观量化倾向,已经随着数理统
计手段在心理测量中的深度应用发展到一个极致,有项目反应理论的数学面目为证。传统测
验通过统计方法尽力挖掘测验分数的有效信息,对于解决实际评估问题,不能不谓之“尚且有
效可行”。但是,由于实质理论的薄弱和欠缺,即使是作为最先进、最有发展潜力的项目反应理
论,也无法圆满地回答测量的效度问题。缺乏实质心理学理论作支点,就决定了传统测量在深
入地分析被试任务作答内部心理机制方面的天然局限,在回答“测了什么”问题上难免陷入混
乱局面。
以成就测验为例,在当前心理计量模型之下,测验设计只根据误差结构。即使考虑项目内
容,也不是从内容的理论出发。结果造成测验内容混杂、内容类别多重交叉。心理计量学家把
所有问题的解决都求助于统计手段,采取误差最小化的约束(边界条件)来保证内容领域。典
型的就是在一个内容类别内,假设一个单维题库(单维性假设是经典测验理论所未言明的前
提,项目反应理论已明确提出单维性假设),选题的终极目标定位于:使得从观察分数推论一个
或更多底层能力的精确性能达到最大。这种采取误差最小化的约束(边界条件)的做法是不是
能从根本上保证内容领域呢?回答是否定的。因为,这一测量过程前一半的任务分析基础是
含糊的,没有一个清晰界定的内容领域,当然更无法将测验结果可信地推广。
所以,包括项目反应理论在内的传统测量并没有很好地回答效度问题。在效度的确定上,
传统测量集中于强调前后测度的作答一致性或者说项目间的共变(协方差)。通过联合求同和
求异来构筑测量的效度指标系统。这基本上是一种回避正面作答的功能主义的倾向。
-./
在万方数据年提出将作答一致性和作答难度两方面整合起来求解测量效度难题。
0123456 !7#+ -./
心理学探新年
;: :<<:
认为,解释项目作答难度可以明显提高测验的效度状态。因为,要获得项目作答难度,
!"#$%&’
首先必须透彻理解任务所需的心理加工特性。所以,基于对底层作答机制的理解来标