如何对培训项目进行评估

Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,*,Hong Tan,高级经济学家,世界银行学院人力发展局,对培训项目进行评估：,一个全球适用的初级评估实例,背景,全球对针对失业和劳动力生产力低下开展的培训活动兴趣很大，却受到培训成本高昂的阻碍。,鉴此，决策层对评估和了解以下问题感兴趣：,培训项目有作用吗？培训对象是谁？,培训能提高成效吗？,这些问题,无法,从以下方面得到回答：,绩效研究和机制评估研究,受训者满意度主观评估,需要对比组的纯效应评估研究,纯效应评估,回答这些问题的唯一方法是,:,把培训项目的受训者（对象组）的结果与未接受培训的类似人群（对比组）进行比较,。,实例,:,80%,的受训者获得了就业。但是只有,60%,的能够自行找到工作，其余的20%差异是培训纯效应的估计值，为评价投资的公共收益提供了基础。,所面对的挑战是反事实的,建立起一个由类似个体组成的未参加培训项目的对比人群。,目标,了解主管部委（由谁来评估）和决策者（由谁决定资源分配）关于影响力评估的核心概念和方法,为培训和其他劳动力市场项目提供一个介绍评估纯影响力的设计和数据收集的入门手册,着重强调一些可能的对项目影响力进行评估时易犯的错误，并通过修正错误来修正培训项目的设计，改进评估的既定目标,讲课大纲,影响力评估方法,实验设计和准实验设计,2.,设计原则,估计培训的影响力,整体影响力、分组分析、相互作用,培训项目评估实例,评估设计、评估发现和教训,评估方法,实验设计,培训前评估对象和对比组的随机分组,分组程序要确保对象组和对比组具有类似特点,准实验设计,培训后从培训人群中选出对象组，从非培训人群中选出对比组,应用统计技巧确保具有类似特点,实验设计,优点,解释评估结果简便易行,培训产生的纯影响力既是对象组和对比组平均结果之间的差异,缺点,受训者中的“精华”,分组中的伦理问题及“霍桑效应”,酝酿时间长达,2-3,年,需要有优良的数据收集为基础,准实验设计,优点,通常可在一年内完成,降低成本和简便数据收集过程要求评估建立在现存行政记录的基础之上,缺点,要求在统计方法方面拥有实力，建立一个类似的对比组并对项目影响力进行评估,某些挑战,(,见下),对比组方面的问题,准实验设计,培训前后的对比,把受训者自身作为对比组,对观察对象的还原,使用,OLS,评估影响力，排除观察对象特点方面的差异 对评估的影响,选择性还原,使用,Heckman,修正法排除主观对未观察到的特点的偏见对影响力评估造成的影响,倾向得分配合,使用盖然性得分法改进对比组与对象组的配合,设计原则,某些原则同时适用两种方法,统一资格标准,足够的抽样规模,抽样法和数据收集,标准处理,合理的成本和时间框架,稳定的评估环境,与其他项目的相互作用,评估影,响,响力,E(Yp)E(Yc),T-,检验对,象,象组,“p”,的结果,Y(,例如收,入,入、就,业,业,),是否有,别,别于,对,对比组,“,“,c”,的结果,Y,2).Yi=a0+a1Pi+ui,多层还,原,原等同,于,于,(1),P,是,1,0,表明该,个,个体,“i”,是受训,者,者，并,检,检测项,目,目影响,力,力,a1,是否有,意,意义,其他评,估,估问题,1).,Yi=a0+a1Pi+a2Xi+ui,采用还,原,原法调,整,整特点,X,上的差,异,异并评,估,估纯影,响,响力,2).Yi=a0+a1P1i+a2P2+ui,分析培,训,训项目,的,的次组,成,成因素,P1,和,P2,例如培,训,训时间,长,长短、,公,公共培,训,训和私,营,营培训,3).Yi=a0+a1Pi+a2P.ES+a3ES+ui,检测培,训,训和其,他,他就业,服,服务之,间,间的相,互,互作用,效,效应,ES,未观察,项,项问题,对未观,察,察特点,的,的主观,偏,偏见影,响,响培训,决,决策和,培,培训结,果,果,Heckman,选择性,程,程序,修正未,观,观察特,点,点后对,影,影响力,进,进行评,估,估,差异之,差,差别程,度,度程序,排除未,观,观察特,点,点的影,响,响，使,用,用培训,前,前后对,象,象组和,对,对比组,的,的数据,对,对影响,力,力进行,评,评估,实例1,美国职,业,业培训,与,与合作,伙,伙伴关,系,系法,(JTPA),使用随,机,机分组,实,实验设,计,计对职,业,业培训,与,与合作,伙,伙伴关,系,系法进,行,行多年,期,期评估,结果,以,成,成年人,为,为对象,的,的培训,取,取得了,成,成功,提高收,入,入,7-11%,每,1,美圆的,投,投资收,益,益为1.5美,圆,圆,以年轻,人,人为对,象,象的培,训,训失败,了,了,议会削,减,减了职,业,业培训,与,与合作,伙,伙伴关,系,系法项,目,目中培,训,训年轻,人,人的预,算,算，但,增,增加了,对,对成年,人,人培训,的,的预算,评估协,助,助判定,并,并取消,无,无效的,项,项目，,并,并将资,源,源重新,分,分配给,成,成本效,益,益高的,项,项目,实例2,中东欧,局,局培训,影,影响力,评,评估,捷克共,和,和国、,匈,匈牙利,、,、波兰,和,和土耳,其,其,对,ALMP,的准实,验,验评估,包,包括使,用,用通用,方,方法的,培,培训,就业培,训,训的影,响,响力,除了土,耳,耳其，,在,在其他,国,国家均,取,取得的,影,影响范,围,围较小,但,但积极,的,的影响,力,力；在,某,某些国,家,家的影,响,响力较,为,为持久,对妇女,、,、青年,工,工人以,及,及中等,教,教育水,平,平以下,人,人群的,的,的影响,力,力更大,各国培,训,训产生,的,的影响,力,力有共,性,性也有,差,差异：,各,各国应,自,自行开,展,展评估,活,活动,评估结,果,果导致,土,土耳其,和,和捷克,共,共和国,改,改进了,培,培训既,定,定目标,，,，明确,了,了妇女,作,作为培,训,训的对,象,象,实例3,墨西哥,中,中小企,业,业培训,项,项目,(CIMO),劳动部,向,向中小,企,企业提,供,供培训,和,和技术,援,援助项,目,目以提,高,高企业,的,的生产,力,力和工,人,人的收,入,入,2,项对象,组,组企业,和,和对比,组,组企业,准,准实验,评,评估的,混,混合结,果,果,提高了,中,中期结,果,果，例,如,如培训,、,、劳动,力,力的流,动,动、应,用,用质量,控,控制、,次,次品率,下,下降等,参与该,项,项目的,企,企业生,产,产力水,平,平较低,：,：该项,目,目仅对,生,生产性,较,较低的,企,企业有,吸,吸引力,但是，,生,生产力,差,差异将,随,随着时,间,间的推,移,移而减,小,小，差,异,异之差,别,别程度,程,程序（,DID,）,）,显示出,积,积极影,响,响力,关注选,择,择性和,未,未观察,特,特点的,影,影响，,收,收集项,目,目前后,数,数据,谢谢,本演示,细,细节见,论,论文。,有,有关评,估,估设计,、,、,方法论,和,和结果,的,的进一,步,步研究,请,请见参,考,考,文献。,9,、静夜四,无,无邻，荒,居,居旧业贫,。,。2022/12/232022/12/23,Friday,December23,2022,10,、,雨,雨,中,中,黄,黄,叶,叶,树,树,，,，,灯,灯,下,下,白,白,头,头,人,人,。,。,。,。2022/12/232022/12/232022/12/23,12/23/20229:39:45PM,11,、以我,独,独沈久,，,，愧君,相,相见频,。,。2022/12/232022/12/232022/12/23,Dec-2223-Dec-22,12,、故人,江,江海别,，,，几度,隔,隔山川,。,。2022/12/232022/12/232022/12/23,Friday,December 23,2022,13,、乍见,翻,翻疑梦,，,，相悲,各,各问年,。,。2022/12/232022/12/232022/12/232022/12/23,12/23/2022,14,、他乡,生,生白发,，,，旧国,见,见青山,。,。23,十,十二月20222022/12/232022/12/232022/12/23,15,、比不了,得,得就不比,，,，得不到,的,的就不要,。,。十二月222022/12/232022/12/232022/12/23,12/23/2022,16,、行动出,成,成果，工,作,作出财富,。,。2022/12/232022/12/23,23 December2022,17,、做前，,能,能够环视,四,四周；做,时,时，你只,能,能或者最,好,好沿着以,脚,脚为起点,的,的射线向,前,前。2022/12/232022/12/232022/12/232022/12/23,9,、没有失,败,败，只有,暂,暂时停止,成,成功！。2022/12/232022/12/23,Friday,December23,2022,10,、很多事情,努,努力了未必,有,有结果，但,是,是不努力却,什,什么改变也,没,没有。2022/12/232022/12/232022/12/23,12/23/20229:39:45 PM,11,、成功就是,日,日复一日那,一,一点点小小,努,努力的积累,。,。2022/12/232022/12/232022/12/23,Dec-2223-Dec-22,12,、世,间,间成,事,事，,不,不求,其,其绝,对,对圆,满,满，,留,留一,份,份不,足,足，,可,可得,无,无限,完,完美,。,。2022/12/232022/12/232022/12/23,Friday,December23,2022,13,、不,知,知香,积,积寺,，,，数,里,里入,云,云峰,。,。2022/12/232022/12/232022/12/232022/12/23,12/23/2022,14,、,意,意,志,志,坚,坚,强,强,的,的,人,人,能,能,把,把,世,世,界,界,放,放,在,在,手,手,中,中,像,像,泥,泥,块,块,一,一,样,样,任,任,意,意,揉,揉,捏,捏,。,。23,十,十,二,二,月,月20222022/12/232022/12/232022/12/23,15,、,楚,楚,塞,塞,三,三,湘,湘,接,接,，,，,荆,荆,门,门,九,九,派,派,通,通,。,。,。,。,。,。十二月222022/12/232022/12/232022/12/23,12/23/2022,16,、少年,十,十五二,十,十时，,步,步行夺,得,得胡马,骑,骑。2022/12/232022/12/23,23December2022,17,、空山,新,新雨后,，,，天气,晚,晚来秋,。,。2022/12/232022/12/232022/12/232022/12/23,9,、杨柳散和,风,风，青山澹,吾,吾虑。2022/12/232022/12/23,Friday,December 23,2022,10,、阅读一切,好,好书如同和,过,过去最杰出,的,的人谈话。2022/12/232022/12/232022/12/23,12/23/20229:39:46 PM,11,、越是没,有,有本领的,就,就越加自,命,命不凡。2022/12/232022/12/232022/12/23,Dec-2223-Dec-22,12,、越是无,能,能的人，,越,越喜欢挑,剔,剔别人的,错,错儿。2022/12/232022/12/232022/12/23,Friday,December23,2022,13,、知人者,智,智，自知,者,者明。胜,人,人者有力,，,，自胜者,强,强。2022/12/232022/12/232022/12/232