培訓項目評估世界銀行學院.ppt

Hong Tan 高級經(jīng)濟學家 世界銀行學院人力發(fā)展局,對培訓項目進行評估： 一個全球適用的初級評估實例,背景,全球?qū)︶槍κI(yè)和勞動力生產(chǎn)力低下開展的培訓活動興趣很大，卻受到培訓成本高昂的阻礙。 鑒此，決策層對評估和了解以下問題感興趣： 培訓項目有作用嗎？培訓對象是誰？ 培訓能提高成效嗎？ 這些問題無法從以下方面得到回答： 績效研究和機制評估研究 受訓者滿意度主觀評估 需要對比組的純效應評估研究,純效應評估,回答這些問題的唯一方法是: 把培訓項目的受訓者（對象組）的結果與未接受培訓的類似人群（對比組）進行比較 。 實例: 80% 的受訓者獲得了就業(yè)。但是只有60%的能夠自行找到工作，其余的20%差異是培訓純效應的估計值，為評價投資的公共收益提供了基礎。 所面對的挑戰(zhàn)是反事實的建立起一個由類似個體組成的未參加培訓項目的對比人群。,目標,了解主管部委（由誰來評估）和決策者（由誰決定資源分配）關于影響力評估的核心概念和方法 為培訓和其他勞動力市場項目提供一個介紹評估純影響力的設計和數(shù)據(jù)收集的入門手冊 著重強調(diào)一些可能的對項目影響力進行評估時易犯的錯誤，并通過修正錯誤來修正培訓項目的設計，改進評估的既定目標,講課大綱,影響力評估方法 實驗設計和準實驗設計 2. 設計原則 估計培訓的影響力 整體影響力、分組分析、相互作用 培訓項目評估實例 評估設計、評估發(fā)現(xiàn)和教訓,評估方法,實驗設計 培訓前評估對象和對比組的隨機分組 分組程序要確保對象組和對比組具有類似特點 準實驗設計 培訓后從培訓人群中選出對象組，從非培訓人群中選出對比組 應用統(tǒng)計技巧確保具有類似特點,實驗設計,優(yōu)點 解釋評估結果簡便易行 培訓產(chǎn)生的純影響力既是對象組和對比組平均結果之間的差異 缺點 受訓者中的“精華”, 分組中的倫理問題及“霍桑效應” 醞釀時間長達2-3年 需要有優(yōu)良的數(shù)據(jù)收集為基礎,準實驗設計,優(yōu)點 通常可在一年內(nèi)完成 降低成本和簡便數(shù)據(jù)收集過程要求評估建立在現(xiàn)存行政記錄的基礎之上 缺點 要求在統(tǒng)計方法方面擁有實力，建立一個類似的對比組并對項目影響力進行評估 某些挑戰(zhàn)(見下),對比組方面的問題 準實驗設計,培訓前后的對比 把受訓者自身作為對比組 對觀察對象的還原 使用OLS評估影響力，排除觀察對象特點方面的差異 對評估的影響 選擇性還原 使用Heckman修正法排除主觀對未觀察到的特點的偏見對影響力評估造成的影響 傾向得分配合 使用蓋然性得分法改進對比組與對象組的配合,設計原則,某些原則同時適用兩種方法 統(tǒng)一資格標準 足夠的抽樣規(guī)模 抽樣法和數(shù)據(jù)收集 標準處理 合理的成本和時間框架 穩(wěn)定的評估環(huán)境 與其他項目的相互作用,評估影響力,E(Yp) E(Yc) T-檢驗對象組“p”的結果Y (例如收入、就業(yè))是否有別于 對比組 “c”的結果Y 2). Yi = a0 + a1Pi + ui 多層還原等同于(1), P 是1,0表明該個體“i”是受訓者，并檢測項目影響力a1是否有意義,其他評估問題,1). Yi = a0 + a1Pi + a2Xi + ui 采用還原法調(diào)整特點X上的差異并評估純影響力 2). Yi = a0 + a1P1i + a2P2 + ui 分析培訓項目的次組成因素P1和P2, 例如培訓時間長短、公共培訓和私營培訓 3). Yi = a0 + a1Pi + a2P.ES + a3ES + ui 檢測培訓和其他就業(yè)服務之間的相互作用效應ES,未觀察項問題,對未觀察特點的主觀偏見影響培訓決策和培訓結果 Heckman選擇性程序 修正未觀察特點后對影響力進行評估 差異之差別程度程序 排除未觀察特點的影響，使用培訓前后對象組和對比組的數(shù)據(jù)對影響力進行評估,實例 1,美國職業(yè)培訓與合作伙伴關系法(JTPA) 使用隨機分組實驗設計對職業(yè)培訓與合作伙伴關系法進行多年期評估 結果 以成年人為對象的培訓取得了成功 提高收入7-11 %, 每1美圓的投資收益為1.5美圓 以年輕人為對象的培訓失敗了 議會削減了職業(yè)培訓與合作伙伴關系法項目中培訓年輕人的預算，但增加了對成年人培訓的預算 評估協(xié)助判定并取消無效的項目，并將資源重新分配給成本效益高的項目,實例 2,中東歐局培訓影響力評估 捷克共和國、匈牙利、波蘭和土耳其 對ALMP的準實驗評估包括使用通用方法的培訓 就業(yè)培訓的影響力 除了土耳其，在其他國家均取得的影響范圍較小但積極的影響力；在某些國家的影響力較為持久 對婦女、青年工人以及中等教育水平以下人群的的影響力更大 各國培訓產(chǎn)生的影響力有共性也有差異：各國應自行開展評估活動 評估結果導致土耳其和捷克共和國改進了培訓既定目標，明確了婦女作為培訓的對象,實例 3,墨西哥中小企業(yè)培訓項目(CIMO) 勞動部向中小企業(yè)提供培訓和技術援助項目以提高企業(yè)的生產(chǎn)力和工人的收入 2項對象組企業(yè)和對比組企業(yè)準實驗評估的混合結果 提高了中期結果，例如培訓、勞動力的流動、應用質(zhì)量控制、次品率下降等 參與該項目的企業(yè)生產(chǎn)力水平較低：該項目僅對生產(chǎn)性較低的企業(yè)有吸引力