文档介绍：1 4 3 Q 心理科学 P,yclo1叩icalscence 2005 28(6):1430 一1432
质性研究中编码者信度的多种方法考察
徐建平’,2. 张厚桑3
(l 陕西师范大学心理系西安,71。。62)( 2中国科学院心理研究所,北京 100 1o 1)
(」北京师范大学心理学院,)
摘要质性研究中检验编码者信度的方法有归类一致性指数、编码信度系数、相关系数、中位数检验、概化系数等。基于教师
胜任力访谈数据集,对编码者信度考察结果表明,归类一致性指数和编码信度系数受相同编码数影响而不稳定,相关系数受数
据类型制约,中位数检验受研究设计影响概化系数则受编码者和编码项目的数量影响。研究中须合理选用
来教学业绩考核评价为优秀的在岗教师组成。普通组由一
1 引言
般教师组成,随机选自高绩效教师所在的学校。
由于质性研究中文本资料编码不一致现象的存在,编码编码。2 名编码者仔细阅读正式访谈文本,依照《教师胜
者信度历来受研究者关注川。为确保编码者在内容分析、文任力编码词典》编码并登录胜任特征出处(文本编号、页码、
本理解、主题提取、编码及解释中一致,通常对编码数据要做行号)、胜任特征代码、等级水平。
必要考察。本文结合教师胜任力研究数据集,探讨质性研究用多种方法考察编码者信度。统计 2 名编码者对每个
中多种检验编码者信度方法的效用。受访者叙述的所有行为事件中各胜任特征在不同等级上出
现的频次。依此计算各个胜任特征发生的总频次、等级分
2 方法和步骤数、平均等级分数和最高等级分数。最后,采用多种方法对
预访谈。采用行为事件访谈法(B EI )对 7 名教师做个别这些数据的编码者信度进行检验。
访谈,要求叙述“教学工作中三件成功和三件失败的事件”,
3 结果和分析
涉及发生的情境、任务、对话、行动、思考、感受和影响。访谈
全程录音。基于录音文本,运用主题和内容分析法,练习编 3 .1 归类一致性指数及编码信度系数
码,形成《教师胜任力编码词典》。归类一致性指数指对编码归类相同数占归类总数的百
筛选编码者。从预访谈文本编码者中,筛选出识别胜任分比,即cA = Zx s/( TI +TZ)。式中5 表示两名编码者归类
特征行为指标准确率高、编码一致性高的编码者 2 名。他们一致数,T,、T:表示每人的编码总数[21 。编码信度系数公式
均接受过严格的 B EI 编码方法训练。为R = (n 义平均相互同意度)/ (1 十n x 平均相互同意度户1。
正式访谈。程序与预访谈相同。受访中小学教师 24 其中平均相互同意度= Z x M /( N ,十蚝) ,式中 M 、N ,、N Z 与
名,高绩效组和普通绩效组各 12 名。高绩效组由获全国和前式中5、T l、几意义相同。显然,后者基于归类一致性指
省级优秀教师、特级教师、优秀教育工作者、模范教师、教育数。结果见表 1。
系统先进工作者、教学能手、骨干教师等荣誉称号,且近三年
表 1 两名编码者归类一致性及编码伯度系数
被试编号 0 1 R 被试编号 R 被试编号 G 、
0 1 n q 0 51