【培訓(xùn)】評鑒人員

1、編輯ppt評鑑人員2001/3/24編輯ppt2評鑑人員 評鑑人員的型態(tài) 評鑑人員的專業(yè)素養(yǎng) 評鑑人員的專業(yè)活動 評鑑人員的專業(yè)能力 評鑑人員的指引原則 評鑑人員的選擇 評鑑人員的認(rèn)證2001/3/24編輯ppt3評鑑人員的型態(tài) 外部評鑑人員 內(nèi)部評鑑人員 內(nèi)部評鑑人員 + 外部諮商人員2001/3/24編輯ppt4評鑑人員的專業(yè)活動 藉由幫助人們瞭解評鑑結(jié)果及其應(yīng)用，來幫助人們改進(jìn)方案 設(shè)計能滿足不同客戶目的的評鑑，包括要求績效責(zé)任的客戶 撰寫評鑑計畫 與客戶協(xié)商評鑑的設(shè)計與結(jié)果 教授學(xué)生、行政人員、方案參予者有關(guān)評鑑的技能 實地執(zhí)行評鑑工作 解釋資料蒐集的結(jié)果，通常要使用統(tǒng)計且或質(zhì)的分析方

2、法，並解釋結(jié)果 準(zhǔn)備並向客戶、財務(wù)提供者、評鑑專業(yè)同儕等，發(fā)表評鑑報告Scriven (1999)2001/3/24編輯ppt5評鑑人員的專業(yè)能力 具有評鑑理論與方法論的知識 可區(qū)別研究與評鑑的程序 可以計畫、設(shè)計、並建構(gòu)一項評鑑工作 有知識與能力去統(tǒng)計分析資料 有知識與能力管理維護(hù)一個資料庫 有能力撰寫並編輯簡要的說明報告 有建構(gòu)評鑑的經(jīng)驗 可以與方案或評鑑工作有關(guān)人員做清楚、有效的溝通 有能力區(qū)分何種資訊適合單一的計畫、單一的需求 瞭解並可回答形成性評鑑及總結(jié)性評鑑的問題Rossi及Freeman (1993)2001/3/24編輯ppt6評鑑人員的專業(yè)能力(二) 方案計畫與評鑑所需的特定

3、知識 能發(fā)展所要評鑑特定問題的計畫 能找到、閱讀並整合相關(guān)研究的文獻(xiàn) 能界定評鑑的目標(biāo)與適當(dāng)格式的資料庫需求 能對已存在的評鑑研究設(shè)計仔細(xì)評估 能將理論模式與真實生活的需求相關(guān)連 能將輸入變項、處理變項及輸出變項相關(guān)連 在與評鑑團(tuán)體及方案執(zhí)行人員一起工作時，能展示適切的人際關(guān)係技巧 能區(qū)別橫斷面與縱斷面研究的優(yōu)點與缺點2001/3/24編輯ppt7評鑑人員的專業(yè)能力(二) 管理系統(tǒng)、功能，並做功能分析 設(shè)計有效的測驗管理系統(tǒng) 在電腦程式設(shè)計師或資料處理團(tuán)體中描述評鑑的設(shè)計及分析的需求 界定選擇或發(fā)展評鑑工具的參考標(biāo)準(zhǔn) 應(yīng)用適當(dāng)?shù)馁Y料蒐集與分析程序 為一個方案或計畫進(jìn)行成本效益分析 使用與方案或

4、計畫的評鑑資訊來做決策 管理一個評鑑單元的活動 2001/3/24編輯ppt8評鑑人員的專業(yè)能力(二) 設(shè)計一個可描述格式、責(zé)任、程序、接受者及時程的資料呈現(xiàn)系統(tǒng) 在前一循環(huán)資料代表意義的基礎(chǔ)上，重新設(shè)計或修正評鑑系統(tǒng) 產(chǎn)生溝通用的報告Payne (1994)2001/3/24編輯ppt9評鑑人員的專業(yè)能力(三)情況挑戰(zhàn)評鑑人員所需特定技能高度爭論的議題促進(jìn)不同觀點衝突解決的技能高曝光率的方案(1)與方案(2)在媒體圈報告發(fā)現(xiàn)(1)公開發(fā)表的能力(2)繪製圖表的能力(3)媒體管理的能力高度可變的方案環(huán)境在時景、議題及焦點上適應(yīng)快速的改變(1)對不明確感的容忍度(2)快速的反應(yīng)(3)機(jī)動性(4)

5、是個快速的學(xué)習(xí)者多重文化或國際方案包含不同的觀點、價值，能瞭解文化的盲點與偏見(1)對不同文化的敏感度(2)具有瞭解與混合不同觀點的能力團(tuán)隊工作管理人群(1)定義並使用團(tuán)體中個人的技能(2)建構(gòu)團(tuán)隊的能力攻擊評鑑保持信用(1)沉默(2)能保持住證據(jù)與結(jié)論的焦點腐敗的評鑑(1)解析倫理問題(2)堅持標(biāo)準(zhǔn)(1)整合性(2)誠實性(3)清楚的倫理感覺資料來源：Patton (1997), Utilization-Focused Evaluation.2001/3/24編輯ppt10評鑑人員的指引原則 系統(tǒng)化的詢問 在建構(gòu)評鑑時必須堅持最適當(dāng)?shù)募夹g(shù)標(biāo)準(zhǔn)，不論其工作在本質(zhì)上是屬於質(zhì)或量的，都要增加評鑑資

6、訊的精確度與可信度 在評鑑的各種問題上同時探求客戶的優(yōu)點與缺點，而且要用不同的方法回答這些問題 在報告評鑑者的工作事項時，必須精確地說明所採用的方法或方法論，並充份、仔細(xì)地允許每個人瞭解、解釋及評論；清楚地界定評鑑及其結(jié)果的限制，以脈胳性的、適當(dāng)?shù)姆绞?，討論這些價值、假定、理論、方法、結(jié)果等議題，分析並解釋評鑑發(fā)現(xiàn)與評鑑影響的重要程度2001/3/24編輯ppt11評鑑人員的指引原則(續(xù)) 能力 有適切的教育、能力、技能及經(jīng)驗，以便於執(zhí)行評鑑所需的工作任務(wù) 在其專業(yè)訓(xùn)練與能力的限制下從事實務(wù)工作，而且必須謝絕超過這些限制的評鑑行為。當(dāng)謝絕委託或需求是不可能或不適當(dāng)?shù)?，評鑑人員必須釐清任何評鑑可

7、能導(dǎo)致的所有限制，也必須十分努力地直接或經(jīng)由他人的幫助來獲得所需的能力 必須持續(xù)地尋求維護(hù)並改進(jìn)本身的能力，以提供在評鑑中更高層次的成就。這個持續(xù)性的專業(yè)發(fā)展，可能包括正式的課程、工作坊、自我研究、自我評鑑、及向其他評鑑人員學(xué)習(xí)技能與專業(yè)等2001/3/24編輯ppt12評鑑人員的指引原則(續(xù)) 完整誠實 必須誠實地與客戶及相關(guān)關(guān)係人，協(xié)商有關(guān)費用、工作任務(wù)、方法論的限制、獲致結(jié)果的範(fàn)圍、結(jié)果資料的使用等議題，先提出這些議題的初步構(gòu)想以供討論及界定 必須記錄與原先協(xié)商的計畫不同的所有改變與改變的原因，如果這些改變將對評鑑的範(fàn)圍與可能的結(jié)果有重大的影嚮，評鑑人員必須立刻通知客戶及財務(wù)提供者，有關(guān)

8、這些變化以及可能造成衝擊的訊息2001/3/24編輯ppt13評鑑人員的指引原則(續(xù)) 必須適當(dāng)、明確地尋求有關(guān)其本身、客戶、與其他財務(wù)提供者對評鑑行為與成果等相關(guān)議題的決策 無論評鑑什麼，均必須揭示任何評鑑中相關(guān)的角色或關(guān)係在興趣上的衝突，這些衝突必須在評鑑結(jié)果的報告中提及 必須報告在合理的限制之下的實施程序、資料或發(fā)現(xiàn)等訊息，以避免或校正別人對評鑑人員工作實際上的誤解與誤用 除了引人注目的理由外，評鑑人員必須揭露所有評鑑的財務(wù)支援，以及對評鑑所有要求的來源。2001/3/24編輯ppt14評鑑人員的指引原則(續(xù)) 如果評鑑人員所決定的特定程序或活動，可能產(chǎn)生易受誤解的評鑑資訊或結(jié)論，評鑑人

9、員有責(zé)任與客戶溝通所關(guān)切之處及其原因 如果與客戶的討論不能解決這些問題，評鑑人員必須合法的婉拒實施這個令人迷惑的評鑑，如果不能婉拒，評鑑人員必須向同僚或相關(guān)的關(guān)係人諮詢有關(guān)執(zhí)行上適當(dāng)?shù)耐緩?001/3/24編輯ppt15評鑑人員的指引原則(續(xù)) 尊敬人們 在所有用得到的地方，評鑑人員必須遵守現(xiàn)有的專業(yè)倫理與標(biāo)準(zhǔn)，重視評鑑中可能產(chǎn)生的危機(jī)、傷害與負(fù)擔(dān)，重視評鑑參予人員的知情同意，重視對評鑑參予者有關(guān)信賴度範(fàn)圍與限制的通知 必須對評鑑中可能傷害客戶或財務(wù)提供者興趣的結(jié)果，做一些在評鑑中負(fù)面判斷或結(jié)論評鑑明確的陳述。在這種情況下必須尋求對可能受傷害者最大的優(yōu)勢，並降低不必要傷害發(fā)生機(jī)會，而這並不代表

10、在評鑑發(fā)現(xiàn)的完整性上要作任何妥協(xié)，因此必須很小心地下判斷，可能的話這些類似的問題在評鑑的過程中，就以協(xié)商的方式加以解決2001/3/24編輯ppt16評鑑人員的指引原則(續(xù)) 在己知評鑑會給一些財務(wù)提供者的興趣帶來負(fù)面影響時，評鑑者必須妥善地管理評鑑，並以十分尊敬財務(wù)提供者尊嚴(yán)與價值的方法，來溝通結(jié)果 必須注意促進(jìn)評鑑中的社會平等，使對評鑑有貢獻(xiàn)的人都能得到有益的回報。 評鑑人員有責(zé)任去定義並尊重參予者間的差異，如宗教、種族、文化、性別、年齡等，並在評鑑的計畫、管理、分析及報告等方面，留心這些差異的潛在關(guān)連2001/3/24編輯ppt17評鑑人員的指引原則(續(xù)) 對一般及公眾的福祉負(fù)責(zé) 在規(guī)劃

11、及報告評鑑時，必須考慮所有受評對象及財務(wù)提供者的興趣與觀點，小心地考慮當(dāng)省略某一部份的價值觀或某一群體的看法時，所遇到的公平性的問題 不只要考慮評鑑的立即作業(yè)與結(jié)果，更要考慮評鑑小組的假定、含意與潛在的邊際效應(yīng) 如果有相反的強(qiáng)制性理由，評鑑人員必須允許相關(guān)的評鑑關(guān)係人取得評鑑資訊，而且在資訊來源允許之下，將資訊主動傳播給評鑑關(guān)係人2001/3/24編輯ppt18評鑑人員的指引原則(續(xù)) 必須在客戶需求與其他需求間維持平衡，與提供資金的客戶及要求評鑑的客戶維持一個特定的關(guān)係 有義務(wù)要考量對公共興趣與有益的福祉上，這些義務(wù)在由公共基金所支援的評鑑上更為重要美國評鑑學(xué)會, 19982001/3/24

12、編輯ppt19評鑑人員的專業(yè)素養(yǎng) 包含教育、研究法、評鑑、及一般(經(jīng)濟(jì)、政治、心理等)等四領(lǐng)域的知識與技能 需要專業(yè)發(fā)展上各階段的歷練 那一個人具有評鑑人員所有應(yīng)具備的能力？ 如何解決現(xiàn)階段評鑑人員能力不足的問題?2001/3/24編輯ppt20評鑑人員的選擇 資格條件 學(xué)位 相關(guān)工作經(jīng)驗 具有特定的知識、技能與能力 任務(wù) 依需求而有不同2001/3/24編輯ppt21評鑑人員選擇的檢核問題 在評鑑方面具有什麼樣的經(jīng)驗？ 在與我們的方案，與我們類似的基金提供者或參予者類似的評鑑，具有什麼樣的經(jīng)驗？ 你對像我們這種方案、方案參予者、或基金提供者的評鑑，具有那些知識庫？ 對於我們的評鑑，你有何建議

13、的評鑑方法？ 還有那些方法你不準(zhǔn)備用於我們的評鑑，理由是什麼？2001/3/24編輯ppt22評鑑人員選擇的檢核問題 你對你所提供的服務(wù)是否要訂定契約？你能摘要列出契約的內(nèi)容供我們參考嗎？ 你在評鑑時的指導(dǎo)方針是什麼？ 你對一份好的或是不好的評鑑，是從那些觀點來考量？ 我們的預(yù)算不多，你是否考慮成為我們的一員？為什麼？你以前有沒有這樣做過？我們應(yīng)該知道有關(guān)你的潛在獲益與苦惱有那些？2001/3/24編輯ppt23評鑑人員選擇的檢核問題 如果我們與你訂定合約，實際上會是誰在執(zhí)行這項評鑑工作？ 我們能看你以前做過的例子嗎？ 你能從類似我們這樣的評鑑代理商，提出一些採用你的建議的佐證資料以供參考嗎？

14、 你的待遇如何？2001/3/24編輯ppt24評鑑人員的認(rèn)證 檢定(certification) 涉及完成專業(yè)任務(wù)時個人的能力，而證照代表執(zhí)行任務(wù)的合法權(quán)利 資格認(rèn)定(credentials)、 是一個人必須完成一套專業(yè)課程，包含場地經(jīng)驗或?qū)嵙?xí)講課2001/3/24編輯ppt25評鑑人員的認(rèn)證(續(xù)) 持有執(zhí)照(licensure) 一種獲得去做某事的正式允許；由法律特別授權(quán)去執(zhí)行一些特定事務(wù) 認(rèn)可(accreditation) 是一個由可識別的專業(yè)團(tuán)體，以預(yù)先設(shè)定的參考標(biāo)準(zhǔn)(criteria)或標(biāo)準(zhǔn)(standard)評鑑一個教學(xué)方案，然後在其後的某一段特定期間內(nèi)這個教學(xué)方案被認(rèn)可或不被認(rèn)可2001/3/24編輯ppt26評鑑人員的認(rèn)證(續(xù)) 困難原因 社會上的訴訟案件增加，由於法律上的合法過程是民主的，經(jīng)由合法觀眾的多數(shù)判決就能將錯誤的變成正確的，而不會去理會專業(yè)上的深入考量 缺乏對評鑑人員核心能力的共識2001/3/24編輯ppt27評鑑人員的認(rèn)證(續(xù)) 檢定面臨的挑戰(zhàn) 決定採用那一種基本的檢定途徑 植基於正式的訓(xùn)練(formal training) 植基於評鑑的經(jīng)驗(evaluation experience) 植基於成就(performance) 植基於能力(competencies) 在評鑑是什麼，以及評鑑人員應(yīng)具備的核心能力上達(dá)成共識