心理測量-第8節(jié)-心理測驗的編制課件

1、第八章 測驗的編制第八章 測驗的編制編制測驗的一般程序確定測驗?zāi)康呐c計劃設(shè)計測試項目項目的測試和分析合成測驗測驗使用的標(biāo)準(zhǔn)化及編制使用說明編制測驗的一般程序確定測驗?zāi)康呐c計劃確定測驗?zāi)康臏y驗對象 即這個測驗編成之后將要用于哪些團(tuán)體和個人。測驗?zāi)繕?biāo) 測驗?zāi)繕?biāo)是指所編測驗是用來測量什么心理變量或者行為特征的。測驗用途（功能） 所編出的測驗是要對被試做描述，還是選拔、預(yù)測或者診斷。測驗用途或功能不同，在編制題目的取材范圍和試題難度都有差別。確定測驗?zāi)康臏y驗對象擬定編制計劃 編制計劃，實際上就是對測驗的總體設(shè)計，指出測驗的內(nèi)容結(jié)構(gòu)和項目形式等，以及對每一個內(nèi)容、目標(biāo)的相對重視程度。一般采用雙向細(xì)目表呈

2、現(xiàn)。擬定編制計劃 編制計劃，實際上就是對測驗的總表2-1 小學(xué)自然常識測驗編題計劃獲得基本知識理解原理原則應(yīng)用原理原則分析因果關(guān)系綜合成系統(tǒng)見解建立評價標(biāo)準(zhǔn)合計生物世界35632120資源利用23321010動力和機(jī)械23410112物質(zhì)、物性與能量56832125氣象24322013宇宙25410012地球2221108合計1828301383100表2-1 小學(xué)自然常識測驗編題計劃獲得基本知識理解原理原則 雙向細(xì)目表中兩個維度的具體內(nèi)容，因所編制測驗的性質(zhì)不同而不同。在學(xué)科測驗中，橫向維度一般表示教學(xué)目標(biāo)，縱向維度一般表示教材內(nèi)容。在心理量表編制中，如果一個維度表示測量目標(biāo)（心理特質(zhì)），那

3、么，另一個維度就表示外顯行為。 雙向細(xì)目表中兩個維度的具體內(nèi)容，因所編制測驗計劃的用途在編制階段，測驗計劃指出應(yīng)該編多少和編哪些種類的項目；項目編好后，可將項目的實際分布情況與測驗計劃對照，以確定測驗項目是否恰當(dāng)?shù)卮砹怂獪y量的領(lǐng)域，核對重要方面的內(nèi)容是否遺漏。在記分時可按表中百分比確定每類項目的分?jǐn)?shù)。測驗計劃的用途在編制階段，測驗計劃指出應(yīng)該編多少和編哪些種類產(chǎn)生測題產(chǎn)生測題就是編輯測驗的項目或題目。產(chǎn)生測題一般包括收集測驗有關(guān)資料，選擇測題的形式，編寫、修訂測題等工作。產(chǎn)生測題產(chǎn)生測題就是編輯測驗的項目或題目。產(chǎn)生測題一般包括收產(chǎn)生測題的過程搜集有關(guān)資料選擇項目形式編寫和修訂項目產(chǎn)生測題

4、的過程搜集有關(guān)資料搜集有關(guān)資料1.資料要豐富 有關(guān)所要測量的心理特質(zhì)的理論同行已經(jīng)編制的有關(guān)測量這種心理特質(zhì)的國內(nèi)外量表 訪問專家、教師、在一線工作的有關(guān)人員，征求他們的意見，收集與測題有關(guān)的資料 了解受測群體的實際情況 2.資料要有普遍性 所選擇的材料應(yīng)該具有文化公平性。如，對于智力測驗來講，所收集的資料對于不同文化背景、不同經(jīng)濟(jì)地位、不同地區(qū)的個人和團(tuán)體應(yīng)該是公平的。搜集有關(guān)資料1.資料要豐富 測驗編制經(jīng)驗豐富者在編制測題時，往往會考慮以下幾個測題的來源：已出版的標(biāo)準(zhǔn)測驗；理論和專家的經(jīng)驗；臨床觀察和記錄 測驗編制經(jīng)驗豐富者在編制測題時，往往會考慮以下幾選擇題目形式（第二節(jié)詳述）考慮以下幾

5、點測驗的目的和材料的性質(zhì)接受團(tuán)體的特點各種實際因素選擇題目形式（第二節(jié)詳述）考慮以下幾點編寫并修訂題目編寫題目應(yīng)注意的問題題目的范圍要與測驗計劃所列的雙向細(xì)目表一致題目的數(shù)量要多一倍甚至幾倍，以備刪選和編制復(fù)本題目的難度必須符合測驗?zāi)康暮托枰}目的說明必須清楚明白編寫并修訂題目編寫題目應(yīng)注意的問題項目的試測和分析 初步篩選出來的項目雖然在內(nèi)容上和形式上符合要求，但是否具有適當(dāng)?shù)碾y度與鑒別作用，必須通過實踐來檢驗，也就是要通過預(yù)測進(jìn)行項目分析，為進(jìn)一步篩選項目提供客觀依據(jù)。項目的試測和分析 初步篩選出來的項目雖然在試測即預(yù)備測驗，在測驗時應(yīng)注意以下問題預(yù)測對象應(yīng)來自將正式測驗準(zhǔn)備應(yīng)用的群體實施過

6、程與情境應(yīng)力求與正式測試時的情況相近預(yù)測時限可稍微寬松一些，最好使每個被試都能將項目完成，以搜集比較充分的反應(yīng)資料，使統(tǒng)計結(jié)果更為可靠在預(yù)測過程中，應(yīng)隨時記錄被試的反應(yīng)情形試測即預(yù)備測驗，在測驗時應(yīng)注意以下問題項目分析 對項目的分析包括質(zhì)的分析和量的分析兩個方面。質(zhì)的分析是從內(nèi)容取樣的適當(dāng)性、題目的思想性以及表達(dá)是否清楚等方面加以分析。量的分析是對預(yù)測結(jié)果進(jìn)行統(tǒng)計分析，確定項目的難度、區(qū)分度、備選答案的適宜性等。項目分析 對項目的分析包括質(zhì)的分析和量的 編制一套測驗，只依據(jù)一次預(yù)測的結(jié)果所做的項目分析是不夠的。由于預(yù)測的被試樣本可能會有取樣誤差，故由此得到的項目分析結(jié)果未必完全可靠。為了檢驗所

7、選出的項目的性能是否真正符合要求，有時需選取來自同一總體的另一樣本再測一次，并根據(jù)結(jié)果進(jìn)行第二次項目分析，看兩次分析結(jié)果是否一致。如果某個項目的測試結(jié)果前后相差較大，說明該項目的性能值得懷疑。這種在兩個獨(dú)立樣本中進(jìn)行項目分析的過程叫做復(fù)核。 編制一套測驗，只依據(jù)一次預(yù)測的結(jié)果所做的心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件Reliability StatisticsCronbachs AlphaCronbachs Alpha.309Reliability Statistics心理測量-第8節(jié)-

8、心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件刪除13、16、20題后的結(jié)果刪除13、16、20題后的結(jié)果心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件心理測量-第8節(jié)-心理測驗的編制課件合成測驗項目的選擇項目的編排編造副本 合成測驗項目的選

9、擇項目的選擇在選擇項目時，不但要考慮項目分析所提供的資料，還要考慮測驗的目的、性質(zhì)與功能。最好的項目，就是只測定所需要的特征，并能對該特征加以有效區(qū)分的難度合適的項目。一般來說，項目的區(qū)分度越高越好，這是選擇項目的一條重要標(biāo)準(zhǔn)。特別是對于選拔測驗，此標(biāo)準(zhǔn)尤為重要。項目的選擇在選擇項目時，不但要考慮項目分析所提供的資料，還要選擇項目的另一個指標(biāo)是難度。難度多大為合適并無一個絕對的標(biāo)準(zhǔn)，而要根據(jù)測驗?zāi)康膩泶_定。有的要求難一些，有的則要求容易一些，有的可不考慮難度。根據(jù)項目分析資料選出的項目，還要與測驗計劃再次對照，看看材料內(nèi)容以及所測量的行為目標(biāo)是否與計劃相符，必要時加以適當(dāng)調(diào)整。此外項目的數(shù)量還

10、必須適合于所限定的時間。選擇項目的另一個指標(biāo)是難度。難度多大為合適并無一個絕對的標(biāo)準(zhǔn)項目的編排項目選出之后，必須根據(jù)測驗的目的與性質(zhì)，并考慮被試作答時的心理反應(yīng)，加以合理安排。測驗項目常見的排列方式并列直進(jìn)式混合螺旋式項目的編排項目選出之后，必須根據(jù)測驗的目的與性質(zhì)，并考慮被試編造復(fù)本 為增加實際的效用，一種測驗有時需要有兩個以上的等值型，稱作復(fù)本，復(fù)本越多，使用起來越便利。編造復(fù)本 為增加實際的效用，一種測驗有時需要 測驗的各份復(fù)本必須等值，所謂等值需符合下列幾個條件： 各份測驗測量的是同一種心理特質(zhì) 各份測驗包含相同的內(nèi)容范圍，但題目不應(yīng)有重復(fù) 各份測驗題型相同，題目數(shù)量相等，并且有大體相

11、同的難度分布 測驗的各份復(fù)本必須等值，所謂等值需符合下 只要有足夠數(shù)量的題目，編造復(fù)本的手續(xù)是很簡單的。先將所有適用的題目按難度排列，其次序為1、2、3、4、5、6如果要分成兩個等值的測驗本，可采用下面的方式： A本：1、4、5、8、9、12、13、16、17 B本：2、3、6、7、10、11、14、15、18 只要有足夠數(shù)量的題目，編造復(fù)本的手續(xù)是很簡單的如果要分成三個等值的測驗本，可采用下面的方式分：A本：1、6、7、12、13、18、19、24B本：2、5、8、11、14、17、20、23C本：3、4、9、10、15、16、21、22如果要分成三個等值的測驗本，可采用下面的方式分： 采用

12、上面的分法可使復(fù)本之間在難度上基本相等，從而獲得大體相同的分?jǐn)?shù)分布。復(fù)本編好后，應(yīng)該再試測一次，以判定各本是否等值。 采用上面的分法可使復(fù)本之間在難度上基本相測驗使用的標(biāo)準(zhǔn)化 一套好的題目并不一定是一個好的測驗。對于測驗的基本要求是準(zhǔn)確、可靠。為了減少誤差，就要控制無關(guān)因素對測驗?zāi)康牡挠绊?。這個控制的過程，稱做標(biāo)準(zhǔn)化，包括測驗編制的標(biāo)準(zhǔn)化和測驗使用的標(biāo)準(zhǔn)化兩個方面。制作過程的標(biāo)準(zhǔn)化可保證量具本身符合要求，而使用過程的標(biāo)準(zhǔn)化可保證操作規(guī)范，使用得當(dāng)。測驗使用的標(biāo)準(zhǔn)化 一套好的題目并不一定是一 測驗使用的標(biāo)準(zhǔn)化又可分為測驗內(nèi)容標(biāo)準(zhǔn)化、施測過程標(biāo)準(zhǔn)化、評分計分標(biāo)準(zhǔn)化、分?jǐn)?shù)解釋標(biāo)準(zhǔn)化。 測驗使用的標(biāo)準(zhǔn)

13、化又可分為測驗內(nèi)容標(biāo)準(zhǔn)化、施測過程 盡管對于所有的被試使用了相同的題目，如果在施測時各行其是，所得的分?jǐn)?shù)便不能進(jìn)行比較。為了使測驗條件相同，必須有統(tǒng)一的指導(dǎo)語和時間限制。施測過程 盡管對于所有的被試使用了相同的題目指導(dǎo)語 給被試的指導(dǎo)語屬于測驗刺激的一部分，它的內(nèi)容通常包括對測驗?zāi)康牡恼f明和被試應(yīng)該如何反應(yīng)的指示（包括如何選擇反應(yīng)、記錄反應(yīng)以及時限等）。對于紙筆測驗來說，這些指示一般印在測驗的開始部分，也可以印在另外一張紙上。要求簡單明確，不引起誤解。如果題目形式對被試是生疏的，還應(yīng)該有一些例題。指導(dǎo)語 為了保證測驗情境的一致，還要有對主試的指導(dǎo)語，主要是對測驗細(xì)節(jié)作進(jìn)一步的解釋，以及其他一些

14、有關(guān)事項，包括測驗房間場地的安排（照明、桌椅、隔音、溫度等）測驗材料的分發(fā)，如何計時、計分、對被試的各種提問如何回答，以及在測驗中途發(fā)生意外情況應(yīng)該如何處理。 為了保證測驗情境的一致，還要有對主試的指導(dǎo)時限 確定測驗的時限，要考慮施測條件和實際情況的限制，以及被試的特點（如對兒童、老人、病人施測時間不宜過長），不過更重要的是考慮測量目標(biāo)的要求。 通常所用的時限是使大約百分之九十的被試能在規(guī)定時間內(nèi)完成全部測驗。如果題目由易到難排列，應(yīng)使大多數(shù)在規(guī)定時間內(nèi)完成他會回答的問題。時限評分、記分為使評分盡可能客觀，有三點要求及時而清楚地記錄反應(yīng)情況。特別是對口試和操作測驗，此點尤為重要，必要時可以錄音

15、和錄像要有一張標(biāo)準(zhǔn)答案或正確反應(yīng)的表格，即 計分鍵將被試的反應(yīng)和記分鍵比較，對反應(yīng)進(jìn)行分類評分、記分為使評分盡可能客觀，有三點要求無論采用何種評分方法，都必須符合客觀、準(zhǔn)確、經(jīng)濟(jì)、實用四項原則分?jǐn)?shù)評出后還要進(jìn)行合成計算，即將各題目分?jǐn)?shù)合成分測驗分?jǐn)?shù)，再將分測驗分?jǐn)?shù)合成測驗總分?jǐn)?shù)。準(zhǔn)確無誤是對計分的基本要求。無論采用何種評分方法，都必須符合客觀、準(zhǔn)確、經(jīng)濟(jì)、實用四項原分?jǐn)?shù)解釋 一個標(biāo)準(zhǔn)化測驗，不但編制、施測和評分要標(biāo)準(zhǔn)化，對分?jǐn)?shù)的解釋也必須標(biāo)準(zhǔn)化，如果同一個分?jǐn)?shù)可做出不同的推論，測量便失去了客觀性。常模參照測驗分?jǐn)?shù)的解釋標(biāo)準(zhǔn)參照測驗分?jǐn)?shù)的解釋 無論哪種測驗，都要參照某個系統(tǒng)對原始分?jǐn)?shù)加以轉(zhuǎn)換，才

16、能做出有意義的解釋。分?jǐn)?shù)解釋 一個標(biāo)準(zhǔn)化測驗，不但編制、施測和搜集信度、效度資料 測驗編好后，必須對其測量的可靠性和有效性加以評估，為此就要進(jìn)行測量學(xué)方面的分析，搜集信度和效度資料。搜集信度、效度資料 測驗編好后，必須對其測量編制測驗手冊 為使測驗?zāi)軌蚝侠淼貙嵤┡c應(yīng)用，在正式測驗編制完成后，還要編寫一本手冊，就下列問題作出詳盡而明確的說明：本測驗的目的和功用測驗的理論背景以及選擇項目的根據(jù)測驗的實施方法、時限及注意事項測驗的標(biāo)準(zhǔn)答案和記分方法常模表或其他有助于分?jǐn)?shù)轉(zhuǎn)化與解釋的資料測驗的信度、效度資料，包括信度系數(shù)、效度系數(shù)以及這些數(shù)據(jù)是在什么情境下得到的編制測驗手冊 為使測驗?zāi)軌蚝侠淼貙嵤┡c應(yīng)

17、用，第二節(jié) 測驗項目的編制項目編制的基本原則科學(xué)性原則目的性原則代表性原則合理性原則經(jīng)濟(jì)性原則第二節(jié) 測驗項目的編制項目編制的基本原則項目編制的具體要求題目格式應(yīng)明確具體，不要讓被試誤解題目之間彼此獨(dú)立，不可互相重復(fù)或牽連題目文句要簡明扼要，題目意義必須明確，不能含糊題目不可含有暗示本題或其他題正確答案的線索所題問題應(yīng)避免涉及社會禁忌與個人隱私題目應(yīng)有確切答案題目難度適宜盡量做到施測與評分省時項目編制的具體要求題目格式應(yīng)明確具體，不要讓被試誤解客觀性試題的編制要領(lǐng)客觀性試題又稱固定應(yīng)答型試題，是讓受測者從測驗編制者事先定好的答案中辨認(rèn)出正確答案（成就測驗、教育測驗）。包括選擇題、是非題、匹配題

18、等。客觀性試題的編制要領(lǐng)客觀性試題又稱固定應(yīng)答型試題，是讓受測者客觀題的優(yōu)缺點優(yōu)點：評分簡單準(zhǔn)確；適合測量記憶、理解、應(yīng)用、分析等幾個層次的認(rèn)知目標(biāo)；保證所測內(nèi)容的覆蓋率和代表性。缺點：編制測驗花費(fèi)時間和精力較多；不適合測量被試綜合、評價等高層次的認(rèn)知目標(biāo)；在答題時難以排除猜測。客觀題的優(yōu)缺點優(yōu)點：評分簡單準(zhǔn)確；適合測量記憶、理解、應(yīng)用、選擇題 選擇題在結(jié)構(gòu)上由兩部分組成：一為題干，以直接問句或不完全陳述句的形式出現(xiàn)；另一個為選項，包括1個正確答案和35個錯誤答案，或若干個正確答案和若干個錯誤答案，前者稱為單選題，后者稱為多選題。選擇題 選擇題在結(jié)構(gòu)上由兩部分組成：一為題干 文字、圖形、數(shù)字等

19、不同性質(zhì)的測驗材料都可以采用選擇題的形式，它可以考察被試記憶、鑒別、分析、理解、推理和應(yīng)用等多種能力，因而在標(biāo)準(zhǔn)化心理與教育測驗中用的很多。 文字、圖形、數(shù)字等不同性質(zhì)的測驗材料都可請你選擇一種喜歡的顏色 綠色 茶色 紫色 藍(lán)色 紅色 白色 黃色 智力測驗（主要是測量推理能力）編制中使用的選擇題（1）貓頭鷹是鳥正如白鯊是 a 動物 b 魚類 c 鳥類 d 爬行動物（2）平地與土丘的關(guān)系就如同峽谷與的關(guān)系。 a 溝壑 b 山谷 c 叢林 d 河流 e 高山無正確答案請你選擇一種喜歡的顏色無正確答案在設(shè)計選擇題時應(yīng)注意以下問題：（1）題干所提的問題必須明確，盡量使用簡單而且明晰的詞語，做到題干意義

20、完整，即使被試不看選項亦能完全理解。（2）選項要簡明扼要，切忌冗長。選項中共同的詞語刪掉，放到題干中去，可使題意更明確，同時減少被試看題時間。 例：牛頓最偉大的貢獻(xiàn)在（ ）。 A生物學(xué)方面 B 物理學(xué)方面 C 社會學(xué)方面 D 經(jīng)濟(jì)學(xué)方面在設(shè)計選擇題時應(yīng)注意以下問題：（3）單項選擇中每題只給一個正確答案，其他屬誘答。若是找最合適的答案，應(yīng)用這樣的問句：“下列答案中哪個最合適？”以免引起困惑。（4）各選項長度應(yīng)相等，盡量不要有長有短。同時，選項與題干的聯(lián)系要非常密切。誘答也必須一致，以免被試很容易就排除了誘答項目。 例：黃河發(fā)源于（ ）。 A 甘肅 B 西藏 C 浙江 D 四川（3）單項選擇中每題

21、只給一個正確答案，其他屬誘答。若是找最合（5）選項最好用同一性質(zhì)和形式，如同為人名、地名、數(shù)字、時間等，長度最好相等。例：法國的首都是（ ）。A 倫敦 B 巴黎 C 1792 D 阿爾俾斯山（6）正確答案應(yīng)隨機(jī)排列，避免出現(xiàn)規(guī)律。（5）選項最好用同一性質(zhì)和形式，如同為人名、地名、數(shù)字、時間優(yōu)點：適用范圍廣，既可以適用于文字和數(shù)字的材料，也可以適用于圖形的材料；評分簡單、省時、客觀；相比于判斷題更少受猜測因素的影響。缺點：編擬迷惑答案比較困難；無法測量出被試的言語表達(dá)能力和概括、組織能力，這與簡答題、論述題相比是不足的；盡管選擇題減少了機(jī)遇的影響，但猜測的影響仍然不能完全排除。優(yōu)點：適用范圍廣，

22、既可以適用于文字和數(shù)字的材料，也可以適用于判斷題喜歡在大庭廣眾之下發(fā)表自己的見解。 是 否你常常主動給朋友寫信或打電話嗎？是 否判斷題喜歡在大庭廣眾之下發(fā)表自己的見解。 編制判斷題應(yīng)注意以下幾點:（1）內(nèi)容應(yīng)以有意義的事實、概念或原理為基礎(chǔ)，避免無關(guān)緊要的問題或瑣碎的細(xì)節(jié)。（2）每題只應(yīng)包含一個概念，避免兩個以上的概念在同一題中出現(xiàn)，從而造成似是而非或半對半錯。（3）論點要簡明扼要，意義明確，不要有艱深難懂的詞句或含糊不確定的文字描述。（4）避免使用具有暗示性的特殊詞句。（5）肯定和否定的題數(shù)應(yīng)大致相等，且隨機(jī)排列。（6）題數(shù)不能太少。編制判斷題應(yīng)注意以下幾點:匹配題例題詩圣 關(guān)漢卿 詞圣 吳

23、道子 書圣 杜甫 史圣 歐陽修 文圣 司馬遷 曲圣 王羲之 畫圣 蘇軾 匹配題例題詩圣 關(guān)漢卿 詞圣 吳道子 書戲曲故事多來源于民間傳說，將下列劇目與對應(yīng)的劇種連線天上掉下個林妹妹京劇天仙配包龍圖打坐在開封府 黃梅戲 紅樓夢夫妻雙雙把家還豫劇鍘美案誰說女子不如男越劇花木蘭戲曲故事多來源于民間傳說，將下列劇目與對應(yīng)的劇種連線編寫匹配題的要領(lǐng)一個題目的各個刺激項目及各個反應(yīng)項目應(yīng)該在內(nèi)容上是同質(zhì)的在指導(dǎo)語中要講清匹配依據(jù)，告訴被試每個反應(yīng)可用幾次配對項目項目不可過多或過少，每個刺激項目有且僅有一個反應(yīng)項目匹配按一定邏輯次序排列同一組項目印在一頁上編寫匹配題的要領(lǐng)一個題目的各個刺激項目及各個反應(yīng)項目應(yīng)該在內(nèi)主觀性試題的編制要領(lǐng)主觀性試題又稱自由應(yīng)答型試題、非客觀性試題、論文性試題，是讓受測者用自己的語言或行動來對某一問題做出回答。包括排列題、改錯題、填充題、簡答題、應(yīng)用題、論文題、操作題、聯(lián)想題等。主觀性試題的編制要領(lǐng)主觀性試題又稱自由應(yīng)答型試題、非客觀性試主觀題的優(yōu)缺點優(yōu)點：編制容易；不允許猜測和簡單背誦，能測量復(fù)雜的能力。缺點：評分難度大，不夠客觀；題目少，取樣缺乏代表性。 主觀題的優(yōu)缺點優(yōu)點：編制容易；不允許猜測和簡單背誦，能測量復(fù)改錯題1、全校的師生和老師都參加了這次活動。2、校園里開滿了五顏六色的紅花。3、河南省的人口是我國最多的省份。4