文档介绍：第四章管理研究的有效性
管理研究中,有效性(Validity)是被普遍接受的评价研究的指标。这种评价与其说是对方法本身的优劣进行评价,不如说是对研究方法选择与应用是否适当进行评价。
任何理论都是由对有关概念、概念间关系的描述组成,并有其特定的理论背景和应用范围。因此对管理研究的评价,就集中在对有关概念及概念间关系研究的评价上,同时考察理论的背景和应用范围。
研究有效性的类别
研究的有效性(Validity)主要分为三种:
概念建构有效性
(Construct Validity,.);
内部有效性
(Internal Validity,.)
外部有效性
(External Validity,.)
各种有效性的定义
概念建构有效性是指理论中的抽象概念在多大程度上在实际研究中成功地进行了操作化,即操作变量在何种程度上体现了它想要体现的理论概念的真正含义。
内部有效性是指在多大程度上研究允许得出两个变量之间是因果关系的推断。
外部有效性是指在多大程度上可以将对特定研究样本和在特定研究环境下所得到的研究结果推广到理论假设中所明确的总体和环境中去,因而又可称为可推广性(generalibility)。
三种有效性之间的关系
统计结论有效性
还有一种分类法是把有效性分为四种,即:概念建构有效性;统计结论有效性(Statistical Conclusion Validity,.);内部有效性和外部有效性。
统计结论有效性是指关于变量之间相关变化的统计推论在何种程度上得到证实。对内部有效性则定义为:观察到的相关变化在何种程度上可被认为是因果关系。
概念之间的关系可以表现为相关关系和因果关系,相关关系是因果关系的必要条件。这种分类方法是把前一种分类法中内部有效性的内容分成统计结论有效性和内部有效性两个层次。
一、概念建构有效性
概念建构有效性指的是一种操作化方案在何种程度上反映而且只反映希望度量的概念,而不受其他概念的系统影响。它反映了理论层次的抽象概念与度量抽象概念的操作变量之间的符合程度。
对概念的度量应该是能够量度绝大多数希望反映的概念,而最大程度地避免不希望反映的概念和随机误差的影响。
考察概念建构有效性的必要性
概念建构有效性是理论发展与检验的必要条件。如果抽象概念与它的操作变量之间缺乏一致性,理论也就难以成立和发展。研究如果缺乏概念建构有效性,无论随后的数据分析多么复杂精细,研究的结论也是没有意义的。
概念的操作化过程不可避免地会包括一些不应包括的内容,同时又没有把一部分应包括的内容包括进来,因而管理研究在不同程度上都存在概念建构有效性问题。
概念度量误差的基本来源
概念度量误差的一个基本来源是观测变量对概念内涵反映的不充分和不准确。
操作层次的可观测变量是对理论层次的抽象概念的一种表示。实际上,变量不可能只反映它感兴趣的理论概念,也不可能完全体现理论概念。
对一个变量的度量即使高度可靠,即度量的随机误差很小(实际上,任何度量都不可避免会有随机误差),也可能不具有高的概念建构有效性。因为可能是可靠地度量了其它概念,而不是原来希望度量的概念。
概念的多操作化定义
度量误差来源举例
如果要研究采用多媒体手段教学与学生学习效果的关系,可以设计一种实验,通过考试测度采用多媒体手段与不采用多媒体手段学生学习成绩的差别,以检验所提出的假设。
学生的学习成绩作为一种操作变量既反映我们希望反映的概念“学习效果”,也会反映不希望反映的概念,如:考试测试了与学习成绩无关的内容:学习兴趣、考试引起的紧张、学生的语言能力和应试经验等,这些都会给测试带来系统误差。
另外,度量中还会有随机误差,如阅卷错误、记录错误等。