心理測量 第八章 測驗的編制與實施

第八章測驗的編制與使用53p內(nèi)容提要測驗編制的一般程序測驗的實施計分與分數(shù)解釋一、測驗編制的一般程序測驗的界定制定編題計劃編制題目項目的試測和分析合成測驗測驗的標準化測驗的修正與鑒定編寫測驗手冊第一步：測驗的界定測量對象：什么人，兒童/成人，測量目標：什么內(nèi)容，心理變量/行為如：成就、智力、人格測量用途：診斷/預(yù)測常模參照測驗/標準參照測驗第一步：測驗的界定（續(xù)）建構(gòu)測驗的理論依據(jù)：基于邏輯或內(nèi)容：考慮行為的領(lǐng)域范圍并進行相應(yīng)的度量（如教育測驗）基于理論：根據(jù)一種理論編寫出能夠反映理論構(gòu)想的題目（如Myers-BriggsTypeIndicator或MBTI基于容格的類型論）基于外部效標：選擇那些能夠?qū)€體或群體做出區(qū)分的題目（如MMPI，CPI，羅夏墨跡測驗等）。?；诮?jīng)驗第二步：制定編題計劃

總體設(shè)計，指出測驗內(nèi)容結(jié)構(gòu)和項目形式及相對重要程度如：雙向細目表（編制成就測驗）一種標明測驗所包含的內(nèi)容和要測定的技能（構(gòu)想）以及每一個內(nèi)容、技能的相對重要程度的表格?？赡苁嵌嘞虻模幌抻陔p向。要目標明確內(nèi)容（主題）準備編題施測記分題目分析術(shù)語工作分析，匹配題；反應(yīng)暈輪效應(yīng)記分鍵效標，內(nèi)部一致

關(guān)鍵事件心向，多項選擇主被試關(guān)系合成分數(shù)性，測驗同質(zhì)性有代表性（5）（2）機器記分（3）樣本（3）（3）特殊教育目標客觀題與論述影響測驗成績主客觀題決定題目效度的知識的分類題的長短處的因素的記分規(guī)則方法，題目分析（2）（4）（3）（3）的目的（3）理解解釋制定（0）（0）題目權(quán)重對解釋P和D的關(guān)系測驗計劃的目的總分的影響（1）（2）（1）

應(yīng)用對某個單元多項選擇測量測驗指導(dǎo)語猜測的校正，難度和區(qū)分度編制一個具理解、應(yīng)用、（2）置信加權(quán)，指標計算，錯誤體說明分析、綜合和（4）選項的分布（1）評價能力的例子（4）（4）總計81371111第三步：編制題目搜集資料代表性、普遍性選擇形式文字/非言語客觀/論述紙筆/操作編寫和修訂題目測驗題目的編制技術(shù)命題的一般原則：范圍，代表性，難度，數(shù)量，簡明不同題型的編寫規(guī)則分類1：選擇題/是非題/匹配題/填空和簡答題/論述題應(yīng)用題/操作題/聯(lián)想題/排列題/改錯題分類2：全開放型/開放—單一反應(yīng)型/多重選擇/雙級等級評定利克特型/排序/投射/績效項目/分類信息編題舉例1：多擇一題型Do…使用一個直接的問題或一個不完整的陳述作為題干選項或題目在語法和形式上保持一致盡量使所有錯誤選項看起來是可能的Don’t…否定性題目，尤其是在題干是否定性的（雙重否定）使用技術(shù)上的行話反應(yīng)之間相互重疊使用“以上所有”例2：主觀題——人格是非題我喜歡去干有冒險性的工作利克特評定量表：5點或7點評定朋友們通常把我看成是一個瀟灑的人使用特殊符號用于態(tài)度調(diào)查你對XXX電視節(jié)目有什么看法？

23451很不象我非常象我例3：主觀態(tài)度調(diào)查題目的編寫規(guī)則Do…使用現(xiàn)在時態(tài)避免模糊與歧義使用簡單明確的語言語句盡量短選擇各種陳述以覆蓋所有感興趣的內(nèi)容Don’t…詢問事實使用每個人都會贊同或不同意的陳述使用“如果可能”使用雙重否定使用全稱命題（所有…)分析：這些題有什么毛??？當上級布置任務(wù)時，不是說不能接受的。我不相信我們的所有法律對公民都是有益的。如果你去問的話，人們不會告訴你他們大多數(shù)時間都在想什么。有多少人居住在香港？A超過三百萬B超過四百萬C超過五百萬D超過六百萬小結(jié)：題目編寫應(yīng)用理論指導(dǎo)你的題目編寫，不是只靠與外部效標的相關(guān)簡明扼要-明確的指導(dǎo)語，簡明的語言校對你的題目對可能的混淆有所預(yù)期考慮疲勞/厭倦因素考慮短時記憶的限制第四步：項目的試測和分析試測注意：對象代表性過程、情境相似時限稍寬隨時記錄被試反應(yīng)題目分析測驗由題目構(gòu)成。題目的質(zhì)量決定了測驗的質(zhì)量。題目分析可以幫助我們發(fā)現(xiàn)題目的問題，并加以調(diào)整。在測驗建構(gòu)中起著重要作用。題目分析可以從質(zhì)和量兩個方面進行。質(zhì)：內(nèi)容與形式量：統(tǒng)計學(xué)特性題目是否對不同類型的人群有不同的難度與區(qū)分度第五步：合成測驗項目的選擇根據(jù)項目分析結(jié)果篩選項目，選出的題與雙向細目表對照，有效區(qū)分且難度合適，考慮題目數(shù)及所需時間項目編排

通常由易到難并列直進式/混合螺旋式編制復(fù)本復(fù)本等值要求：

－測同一心理特質(zhì)－相同內(nèi)容范圍－題型、題數(shù)相同、難度分布相當－各測驗分數(shù)分布平均數(shù)標準差大致相等第六步、測驗的標準化標準化：控制無關(guān)因素對測驗?zāi)康牡挠绊懙倪^程。標準化包括：編制標準化（符合要求）使用標準化（操作規(guī)范）測驗的標準化編制標準化測驗內(nèi)容－測驗項目相同或等值使用標準化施測過程－施測條件/指導(dǎo)語/時限評分－客觀/正確經(jīng)濟/實用分數(shù)解釋－常模標準化樣本

第七步：測驗的修改和鑒定根據(jù)項目分析結(jié)果，刪除、修改和重新編制題目。這是一個多次往復(fù)的過程對成型的測驗進行標準化，收集測量學(xué)證據(jù)或資料，包括信度與效度等

信度（可靠性或一致性）效度（有效性或正確性）第八步：編寫測驗手冊手冊應(yīng)包括以下內(nèi)容：1.測驗的目的、功用2.理論依據(jù)3.實施方法4.標準答案和計分方法5.常模表或其它分數(shù)轉(zhuǎn)化與解釋的資料6.測驗的信度、效度資料及說明二、測驗的實施測驗實施的一般程序標準化指導(dǎo)語標準時限環(huán)境條件主試的職責*計算機化測驗：計算機輔助測驗/CAT

標準化指導(dǎo)語標準化的指導(dǎo)語（instruction）：是在測量實施時說明測量進行方式以及如何回答問題的指導(dǎo)性語言——對受測者和對主試的標準化：指導(dǎo)語內(nèi)容和形式；主試的朗讀標準時限測量時限：典型行為測驗（主要指的是人格與態(tài)度測驗）一般不給時限最佳行為測驗（主要指能力和成就測驗）需要時限，一般通過試測來確定（90%原則）

環(huán)境條件主試對測量結(jié)果的影響:主試的個性特點：寬容、競爭等主試的期望效應(yīng)：羅森塔爾效應(yīng)（Rosenthaleffect,也稱皮格馬利翁效應(yīng)）

*受測者對測量結(jié)果的影響技巧、練習(xí)和疲勞因素：策略的遷移、熟練化和身心的疲勞焦慮和動機因素：

應(yīng)