文档介绍：Hong Tan
高级经济学家
世界银行学院人力发展局
对培训项目进行评估: 一个全球适用的初级评估实例
背景
全球对针对失业和劳动力生产力低下开展的培训活动兴趣很大,却受到培训成本高昂的阻碍。
鉴此,决策层对评估和了解以下问题感兴趣:
培训项目有作用吗?培训对象是谁?
培训能提高成效吗?
这些问题无法从以下方面得到回答:
绩效研究和机制评估研究
受训者满意度主观评估
需要对比组的纯效应评估研究
纯效应评估
回答这些问题的唯一方法是:
把培训项目的受训者(对象组)的结果与未接受培训的类似人群(对比组)进行比较。
实例:
80% 的受训者获得了就业。但是只有60%的能够自行找到工作,其余的20%差异是培训纯效应的估计值,为评价投资的公共收益提供了基础。
所面对的挑战是反事实的–建立起一个由类似个体组成的未参加培训项目的对比人群。
目标
了解主管部委(由谁来评估)和决策者(由谁决定资源分配)关于影响力评估的核心概念和方法
为培训和其他劳动力市场项目提供一个介绍评估纯影响力的设计和数据收集的入门手册
着重强调一些可能的对项目影响力进行评估时易犯的错误,并通过修正错误来修正培训项目的设计,改进评估的既定目标
讲课大纲
影响力评估方法
实验设计和准实验设计
2. 设计原则
估计培训的影响力
整体影响力、分组分析、相互作用
培训项目评估实例
评估设计、评估发现和教训
评估方法
实验设计
培训前评估对象和对比组的随机分组
分组程序要确保对象组和对比组具有类似特点
准实验设计
培训后从培训人群中选出对象组,从非培训人群中选出对比组
应用统计技巧确保具有类似特点
实验设计
优点
解释评估结果简便易行
培训产生的纯影响力既是对象组和对比组平均结果之间的差异
缺点
受训者中的“精华”, 分组中的伦理问题及“霍桑效应”
酝酿时间长达2-3年
需要有优良的数据收集为基础
准实验设计
优点
通常可在一年内完成
降低成本和简便数据收集过程要求评估建立在现存行政记录的基础之上
缺点
要求在统计方法方面拥有实力,建立一个类似的对比组并对项目影响力进行评估
某些挑战(见下)
对比组方面的问题准实验设计
培训前后的对比
把受训者自身作为对比组
对观察对象的还原
使用OLS评估影响力,排除观察对象特点方面的差异对评估的影响
选择性还原
使用Heckman修正法排除主观对未观察到的特点的偏见对影响力评估造成的影响
倾向得分配合
使用盖然性得分法改进对比组与对象组的配合
设计原则
某些原则同时适用两种方法
统一资格标准
足够的抽样规模
抽样法和数据收集
标准处理
合理的成本和时间框架
稳定的评估环境
与其他项目的相互作用