第二节 研究的有效性在线视频

同学们 大家好

欢迎来到管理定量方法课程

我是今天的主讲老师杨老师

第二节我们一起来学习研究的有效性

我们首先通过一个例子

来给出研究有效性的定义

曾经在网络上争论过一个观点

就是中国真正的经济学家有几个

我们看看一些网友的观点

中国的经济学还远远没有走到

经济科学的门口

中国真正意义上的经济学家

最多不超过五个

真正的经济学家需要坚持理性的精神

经济学家Max Weber说过

现代化的核心精神就是理性化

没有理性主义就不可能有现代化

中国的经济学要向现代科学方向发展

必须把理性主义作为基本的框架

而网友认为中国经济学界太热闹了

大家都可以说自己是经济学家

什么问题都敢谈

有的经济学家今天评股市

明天讲汇率

争论不休

莫衷一是

有的经济学家热衷担任

一些大型公司的独立董事

或在电视上频频上镜

怎么可能做出严肃的经济学研究

一个真正的经济学家

首先要把经济学当作一门科学来对待

必须保证学术研究的独立性和严肃性

必须保持与官场和商场的距离

否则不可能在经济学领域

做出独立的研究成果

那么我们根据网友的这些观点

我们对真正的经济学家

做了一个概念的界定

大家看看是否有效

真正的经济学家要坚持理性精神

要认真钻研学问

要把经济学当作一门科学来对待

要保证学术研究的独立性和严肃性

我们的论据是

中国经济学界太热闹了

经济学家热衷担任一些大型公司的董事

或在电视上频频上镜

那么我们来看看定义有效吗

首先 经济学界太热闹

并不等于不理性

二者也没有因果关系

论者在这里偷换了概念

另外 经济学家热衷于

担任一些大型公司的董事

或在电视上频频上镜

与他们不可能做出严肃的经济学研究之间

不存在必然的因果关系

与逻辑推断的关系

我们通过这个定义可以得到如下的推论

真正的经济学家必须保证

学术研究的独立性跟严肃性

必须保持与官场和商场的距离

我们可以看到在这里的官场

和商场的明确定义

官场是指做官

还是参与政府决策制定

还是官员的圈子

商场是指经商

还是参与企业经营实践

还是商人的圈子

在没有明确定义概念的情况之下

继续推论

推论就缺乏我们所说的研究的有效性

所以我们想通过这个例子

给出大家管理定量研究有效性的定义

管理研究中的有效性

英文是Validity

是被普遍接受的评价研究的指标

这种评价与其说是对

方法本身的优劣进行评价

不如说是对研究方法选择与应用

是否恰当进行评价

任何理论都是由对有关概念间

联系的描述组成

并没有特定的理论背景和应用范围

因此对管理研究的评价就集中在

对有关概念与概念间关系研究评价上

同时考察理论的背景和应用范围

这就是我们所说的研究的有效性

在我们做定量研究的过程中

我们经常会观测三种有效性

第一种有效性

我们称它为概念建构的有效性

也叫做C.V. Construct Validity

第二种有效性

我们把它叫做内部有效性

Internal Validity

简称I.V.

那么最后有一种有效性是外部有效性

英文是External Validity

我们简称为E.V.

那么这三种有效性的定义是什么

首先我们看看概念建构有效性

所谓的概念建构有效性

是指理论中的抽象概念

在多大程度上在实际研究中

成功地进行了操作化

即操作变量在何种程度上体现了

他想要体现的理论概念真正的意义

如同我们在中小学的时候

我们写作文的时候

很多老师会说你的作文写跑题了

实际上在我们的定量研究中

所谓的跑题就是

你的概念建构有效性比较差

概念没有被有效地操作化

没有被有效地测量出来

这是第一种概念建构有效性

第二种有效性

我们把它叫做内部有效性

内部有效性指的是多大程度上

研究允许得到两个变量之间的

因果关系的推断

因为很多定量研究中的变量相关性

不一定指的是真正的变量和变量之间的

因果关系的推断

第三种外部有效性

又叫做外部效度

则是指多大程度上可以将特定的研究样本

和在特定的研究环境下所得到的研究结论

推广到理论假设中所明确的总体

和环境中去

因而又可称之为可推广性

这是我们给大家讲述的

三种有效性的定义

我们给大家画了一张图

来说明三种有效性的定义

首先 可以看到在我们的研究设计中

找到了两个要研究的相关概念

概念x和概念y

那么我们如何把两个概念用一种合适

科学的方法测度出来

我们建立了这条虚线

指的是概念x到变量 x

我们进行了有效的测量

如果测量的有效性高

也就是我们研究过程中的

C.V. 是高的

这个概念建构有效性是高的

这条虚线指的是概念y进行了很好的测量

那么也就是概念y测度的是

C.V. 比较高的

我们在建立变量x和y的关系的时候

通过统计的方法建立了计量关系

如果体现的不仅仅是统计的有效性

也包含了真正的因果关系

那么x和y之间的这种I.V.

内部有效性就是高的

在研究x和y的这种数量关系过程中

我们建立了一个统计的模型

如果这个模型可以扩展到真实的世界去

比如说特定的时间 特定的背景

我们改变样本

改变观察的群体或者是对象

模型也是成立的

在其他的时间 其他的背景

和其他的研究对象中仍然成立

那么这个定量研究的模型E.V.

外部有效性就是高的

但是在我们实际研究中

还会出现一种情况

就是在建立这种定量研究模型过程中

所表现出来的统计结论有效性问题

也就是我们增加的一个有效性

第四种有效性

叫做统计结论的有效性

统计结论的有效性和概念建构有效性之间

和这种因果关系判断内部有效性

和外部有效性之间是一种什么样的关系

首先 我们要定义一下统计结论有效性

统计结论有效性指的是

关于变量之间相关变化的统计推论

在何种程度上得到了证实

对内部有效性则定义为观察到的

相关的变化

在何种程度上可以认为是

真正的因果关系

所以概念之间的关系可以表现为

统计关系和因果关系

相关关系是因果关系的必要条件

这种分类方法是把前一种分类方法中

内部有效性的内容分成了

统计结论有效性

和内部有效性两个层次

所以说当我们建立了一个统计模型的时候

得到了统计结论的有效性

不一定说明你的研究变量之间是真因果

内部有效性不一定高

所以 在讨论统计有效性的同时

也需要使用一些方法

来保证我们研究的内部有效性

如何在研究过程中提高三种有效性

首先 如何提高概念建构有效性

我们要谈到的是概念建构有效性误差的

基本来源

概念度量误差的一个基本来源

概念度量误差的一个基本来源

是观测变量对概念内涵

反映的不充分和不准确

对于一个变量的度量

即使高度地可靠

即度量的随机误差性很小

也可能不具备很高的概念建构有效性

因为可能是可靠地度量了其他的概念

而不是原来我们希望度量的概念

那么怎么办

实际上提高概念建构有效性有两个途径

一个是提高表面的有效性

第二是提高内容的有效性

表面有效性是指由一组专家做出的判断

确定一种度量方法是否确实度量了

他名义上要度量的概念

表面有效性评估则是一个主观的过程

但它通常是有效评价的先决条件

概念度量多数的情况下

必须首先通过表面有效性的检验

所以大家在进行变量的测量的时候

可以多听听专家的意见

比如说你的导师的建议

另外 度量方案中项目越充分的代表了

待测概念的概念域

就越具有内容有效性

比如说我们在度量一些概念的时候

可以看一看其他前人的研究

进行文献综述

使用一些经典的量表

我们给大家画了一张图

来看一看如何通过一些统计手段

和一些其他的方法

来提高概念建构有效性

首先 我们强调定量研究文献综述

必要的时候进行经验的调查

情景的描述

还有一些研究会进行定量

和定性的相结合

比如说进行一个 个案的研究

在统计方法上

我们在后续的课程会讨论

比如说相关关系的研究

克隆巴赫阿拉法系数的计算

以及我们在进行问卷有效性测度的时候

经常会采用的一种方法叫做因子分析

这些都是可以帮助我们

来提高概念建构有效性的统计方法

那么在研究的过程中如何提高内部有效性

内部有效性主要是保证研究的因果关系

因果关系指的是一个概念的变化

引起另一个概念的变化

研究的原因我们称之为自变量

研究的结果我们称之为因变量

管理研究的假设

多数命题是因果关系的命题

这是由认知因果关系在推论 推演

理论推演和实际应用中

所具有的特殊作用所决定的

相关关系是因果关系成立的必要条件

对相关关系的研究可以归入

因果关系研究过程中去

为推断因果关系成立

必须尽可能避免假因果关系干扰

我们给大家三种保证因果关系存在的方法

一个是我们可以观测

自变量 x和因变量y

之间的一种共变关系是否存在

另外 一般的经济规律都表现为

自变量x先变化

才导致的因变量y产生变化

我们可以推断一下

在计量模型的时候

保证x和y之间是一种顺序的变化

第三 我们经常会看到很多计量模型中

会设置大量的控制变量

那么控制变量的设置

也是在进行第三种因果关系的推断

就是排除其他可能的原因

所导致的因果关系

通过三种方式可以尽可能地

提高研究的内部有效性

如何提高外部有效性

管理研究的根本目的是为了解决人们

在经济和社会活动中遇到的管理问题

管理研究面向实践的特点

要求研究者尽可能地将因果关系

推广到更加广泛的应用范围内

任何的理论假设都有其一定的理论背景

和前提假设

管理研究中对理论假设的经验研究

又都是在一定的研究条件

和背景下进行的

实际上我们可以选择不同的研究对象

不同的研究背景和不同的时间要素

来设置我们的计量模型

这样就可以保证我们将研究结论

从具体的研究样本 研究背景

推广到理论中的总体

和其他的背景中去

通过对不同的对象

在不同时间背景下

由不同研究者进行重复的研究

可以验证理论的外部有效性

如果不同的重复研究结论具有一致性

将提高人们对研究外部有效性的信心

这样研究也就具有更大的可应用价值

好 这节课我们就讲到这里

同学们再见