培訓(xùn)項目評估-世界銀行學(xué)院

1、Hong Tan高級經(jīng)濟(jì)學(xué)家世界銀行學(xué)院人力發(fā)展局對培訓(xùn)項目進(jìn)行評估：對培訓(xùn)項目進(jìn)行評估： 一個全球適用的初級評估實例一個全球適用的初級評估實例背景全球?qū)︶槍κI(yè)和勞動力生產(chǎn)力低下開展的培訓(xùn)活動興趣很大，卻受到培訓(xùn)成本高昂的阻礙。鑒此，決策層對評估和了解以下問題感興趣：培訓(xùn)項目有作用嗎？培訓(xùn)對象是誰？培訓(xùn)能提高成效嗎？這些問題無法無法從以下方面得到回答：績效研究和機(jī)制評估研究受訓(xùn)者滿意度主觀評估需要對比組的純效應(yīng)評估研究純效應(yīng)評估回答這些問題的唯一方法是:把培訓(xùn)項目的受訓(xùn)者（對象組）的結(jié)果與未接受培訓(xùn)的類似人群（對比組）進(jìn)行比較 。實例:80% 的受訓(xùn)者獲得了就業(yè)。但是只有60%的能夠自行找到

2、工作，其余的20%差異是培訓(xùn)純效應(yīng)的估計值，為評價投資的公共收益提供了基礎(chǔ)。所面對的挑戰(zhàn)是反事實的建立起一個由類似個體組成的未參加培訓(xùn)項目的對比人群。目標(biāo)了解主管部委（由誰來評估）和決策者（由誰決定資源分配）關(guān)于影響力評估的核心概念和方法為培訓(xùn)和其他勞動力市場項目提供一個介紹評估純影響力的設(shè)計和數(shù)據(jù)收集的入門手冊著重強(qiáng)調(diào)一些可能的對項目影響力進(jìn)行評估時易犯的錯誤，并通過修正錯誤來修正培訓(xùn)項目的設(shè)計，改進(jìn)評估的既定目標(biāo) 講課大綱影響力評估方法實驗設(shè)計和準(zhǔn)實驗設(shè)計2. 設(shè)計原則估計培訓(xùn)的影響力 整體影響力、分組分析、相互作用培訓(xùn)項目評估實例評估設(shè)計、評估發(fā)現(xiàn)和教訓(xùn)評估方法實驗設(shè)計實驗設(shè)計培訓(xùn)前評估

3、對象和對比組的隨機(jī)分組分組程序要確保對象組和對比組具有類似特點準(zhǔn)實驗設(shè)計準(zhǔn)實驗設(shè)計 培訓(xùn)后從培訓(xùn)人群中選出對象組，從非培訓(xùn)人群中選出對比組 應(yīng)用統(tǒng)計技巧確保具有類似特點實驗設(shè)計優(yōu)點優(yōu)點解釋評估結(jié)果簡便易行 培訓(xùn)產(chǎn)生的純影響力既是對象組和對比組平均結(jié)果之間的差異缺點缺點受訓(xùn)者中的“精華”, 分組中的倫理問題及“霍桑效應(yīng)”醞釀時間長達(dá)2-3年需要有優(yōu)良的數(shù)據(jù)收集為基礎(chǔ)準(zhǔn)實驗設(shè)計優(yōu)點優(yōu)點通?？稍谝荒陜?nèi)完成 降低成本和簡便數(shù)據(jù)收集過程要求評估建立在現(xiàn)存行政記錄的基礎(chǔ)之上缺點缺點要求在統(tǒng)計方法方面擁有實力，建立一個類似的對比組并對項目影響力進(jìn)行評估某些挑戰(zhàn)(見下)對比組方面的問題準(zhǔn)實驗設(shè)計培訓(xùn)前后的對比

4、把受訓(xùn)者自身作為對比組對觀察對象的還原使用OLS評估影響力，排除觀察對象特點方面的差異 對評估的影響選擇性還原使用Heckman修正法排除主觀對未觀察到的特點的偏見對影響力評估造成的影響 傾向得分配合使用蓋然性得分法改進(jìn)對比組與對象組的配合設(shè)計原則某些原則同時適用兩種方法統(tǒng)一資格標(biāo)準(zhǔn)足夠的抽樣規(guī)模抽樣法和數(shù)據(jù)收集標(biāo)準(zhǔn)處理合理的成本和時間框架穩(wěn)定的評估環(huán)境與其他項目的相互作用評估影響力E(Yp) E(Yc)T-檢驗對象組“p”的結(jié)果Y (例如收入、就業(yè))是否有別于 對比組 “c”的結(jié)果Y2). Yi = a0 + a1Pi + ui多層還原等同于(1), P 是1,0表明該個體“i”是受訓(xùn)者，并

5、檢測項目影響力a1是否有意義其他評估問題1). Yi = a0 + a1Pi + a2Xi + ui采用還原法調(diào)整特點X上的差異并評估純影響力 2). Yi = a0 + a1P1i + a2P2 + ui分析培訓(xùn)項目的次組成因素P1和P2, 例如培訓(xùn)時間長短、公共培訓(xùn)和私營培訓(xùn)3). Yi = a0 + a1Pi + a2P.ES + a3ES + ui檢測培訓(xùn)和其他就業(yè)服務(wù)之間的相互作用效應(yīng)ES未觀察項問題 對未觀察特點的主觀偏見影響培訓(xùn)決策和培訓(xùn)結(jié)果Heckman選擇性程序修正未觀察特點后對影響力進(jìn)行評估差異之差別程度程序 1) 排除未觀察特點的影響，使用培訓(xùn)前后對象組和對比組的數(shù)據(jù)對影

6、響力進(jìn)行評估實例 1美國職業(yè)培訓(xùn)與合作伙伴關(guān)系法美國職業(yè)培訓(xùn)與合作伙伴關(guān)系法(JTPA)使用隨機(jī)分組實驗設(shè)計對職業(yè)培訓(xùn)與合作伙伴關(guān)系法進(jìn)行多年期評估結(jié)果 以成年人為對象的培訓(xùn)取得了成功提高收入7-11 %, 每1美圓的投資收益為1.5美圓 以年輕人為對象的培訓(xùn)失敗了議會削減了職業(yè)培訓(xùn)與合作伙伴關(guān)系法項目中培訓(xùn)年輕人的預(yù)算，但增加了對成年人培訓(xùn)的預(yù)算評估協(xié)助判定并取消無效的項目，并將資源重新分配給成本效益高的項目實例 2中東歐局培訓(xùn)影響力評估中東歐局培訓(xùn)影響力評估捷克共和國、匈牙利、波蘭和土耳其對ALMP的準(zhǔn)實驗評估包括使用通用方法的培訓(xùn)就業(yè)培訓(xùn)的影響力除了土耳其，在其他國家均取得的影響范圍較小但積極的影響力；在某些國家的影響力較為持久對婦女、青年工人以及中等教育水平以下人群的的影響力更大各國培訓(xùn)產(chǎn)生的影響力有共性也有差異：各國應(yīng)自行開展評估活動評估結(jié)果導(dǎo)致土耳其和捷克共和國改進(jìn)了培訓(xùn)既定目標(biāo)，明確了婦女作為培訓(xùn)的對象實例 3墨西哥中小企業(yè)培訓(xùn)項目墨西哥中小企業(yè)培訓(xùn)項目(CIMO)勞動部向中小企業(yè)提供培訓(xùn)和技術(shù)援助項目以提高企業(yè)的生產(chǎn)力和工人的收入2項對象組企業(yè)和對比組企業(yè)準(zhǔn)實驗評估的混合結(jié)果提高了中期結(jié)果，例如培訓(xùn)、勞動力的流動、應(yīng)用質(zhì)量控制、次品率下降等參與該項目的企業(yè)生產(chǎn)力水平較低：該項目僅對生產(chǎn)性較低的企業(yè)