量表的制定方法和考評(píng)課件

1、現(xiàn)場調(diào)查設(shè)計(jì) 量表的制定方法和量表考評(píng)第1頁，共52頁。量表的制定方法 第2頁，共52頁。一、量表的構(gòu)成元素及層次結(jié)構(gòu)量表 由若干領(lǐng)域（或維度）組成。領(lǐng)域（domain）：由若干方面組成。方面 （facet）：由若干條目組成。條目（item）：是量表最基本的構(gòu)成元素，是不能再分割的構(gòu)成單位。第3頁，共52頁。例如 ：WHOQOL100量表的結(jié)構(gòu)包括6個(gè)領(lǐng)域（維度）24個(gè)方面100個(gè)條目 一、生理領(lǐng)域 二、心理領(lǐng)域 三、獨(dú)立性領(lǐng)域 四、社會(huì)關(guān)系領(lǐng)域 五、環(huán)境領(lǐng)域 六、精神支柱 / 宗教 / 個(gè)人信仰第4頁，共52頁。例如 ：WHOQOL100量表的結(jié)構(gòu)包括6個(gè)領(lǐng)域24個(gè)方面100個(gè)條目一、生理領(lǐng)

2、域 （維度）（一）疼痛與不適 （方面） 1、你對(duì)自己的疼痛或不舒服擔(dān)心嗎？（條目） 2、你在對(duì)付疼痛或不舒服時(shí)有困難嗎？ （條目） 3、你覺得疼痛妨礙您去做自己需要做的事嗎？ （條目）（二）精力與疲倦（方面） 4、 你容易累嗎？ （條目） 5、 疲乏使你煩惱嗎？ （條目）（三）睡眠與休息（方面） 6、 你睡眠有困難嗎？（條目） . （條目）第5頁，共52頁。（一）條目的形式1、線性條目：被試者在有一定刻度（如010線段上劃記，答案的選擇項(xiàng)為整個(gè)線段。 你感到疼痛嗎？ 你的食欲怎么樣？ 0 1 2 3 4 5 6 7 8 9 10根本不疼 極疼 0：表示根本沒有疼痛，10：表示非常疼痛。 0 1

3、 2 3 4 5 6 7 8 9 10 極差 極好第6頁，共52頁。（一）條目的形式2、等距等級(jí)條目：提供給被試者的選擇項(xiàng)是等距離的。 如：你怎樣評(píng)價(jià)自己的記憶力？ 很差，差，中等，好，很好。3、不等距等級(jí)條目：選擇項(xiàng)是不等距離的。 如：對(duì)慢性病療效的評(píng)價(jià)：優(yōu)、良、中、差 分級(jí)的詞語間不完全等距。4、兩分類條目：兩項(xiàng)選擇。如：是，否。第7頁，共52頁。（一）條目的形式5、累積型條目：一個(gè)條目反映的內(nèi)容按難度和數(shù)量分成小項(xiàng)回答。 如：您的健康影響您的行動(dòng)嗎： 是 否 a：能步行1500米的路程 b：能步行800米的路程 c：能步行100米的路程 第8頁，共52頁。（一）條目的形式6、描述性條目：

4、每個(gè)條目的各種答案均作較詳細(xì)的描述 如：反映活動(dòng)能力及范圍的條目，回答選項(xiàng)為： 0：整天臥床，不能走動(dòng) 1：只能在室內(nèi)做些輕微活動(dòng) 2：能在住宅周圍活動(dòng) 3：可任意自由活動(dòng)第9頁，共52頁。（二）條目的語義評(píng)價(jià)性條目： 如：好，差。如 你睡眠好嗎？ 很差 差 不好也不壞 好 很好 你怎樣評(píng)價(jià)自己的記憶力？ 很差 差 不好也不壞 好 很好 總體來講，你的健康狀況是： 非常好 很好 好 一般 差第10頁，共52頁。（二）條目的語義2、強(qiáng)度性條目： 如：重，極重。如： 你的聽力對(duì)你的日常生活有不良影響嗎？ 根本沒影響 有點(diǎn)影響 有影響（中度） 很影響 極影響 在過去4周內(nèi)，你常感到身上有疼痛嗎？一點(diǎn)

5、不疼 很輕微疼痛 輕微疼痛 中等疼痛 嚴(yán)重疼痛第11頁，共52頁。（二）條目的語義3、頻度性條目： 如：很少，經(jīng)常。如： 你感到看東西越來越費(fèi)力了嗎？你覺得生活充實(shí)嗎？所有的時(shí)間大部分時(shí)間比較多時(shí)間一部分時(shí)間小部分時(shí)間沒有此感覺根本沒有偶爾有有（約一半時(shí)間）經(jīng)常有總是有第12頁，共52頁。（二）條目的語義4、能力性條目： 如：能，完全能。 如：你能看清馬路對(duì)面的人嗎？ 0 1 2 3 4 5 6 7 8 9 10完全不能 完全能第13頁，共52頁。（三）條目的性質(zhì)可知覺的客觀性條目自我報(bào)告的主觀條目第14頁，共52頁。二、量表的制定步驟1、明確研究對(duì)象及目的2、設(shè)立研究工作組3、測定概念的定義

6、及分解： 包括哪些領(lǐng)域和方面4、提出量表?xiàng)l目，形成條目池5、確定條目的形式及答案選項(xiàng) 如以吸毒者生存質(zhì)量測定量表為例。 p144第15頁，共52頁。舉例：吸毒者生存質(zhì)量測定量表的制定一、制定的目的和構(gòu)思 1. 吸毒者生存質(zhì)量評(píng)定 2. 比較不同戒毒模式 3. 量表含多個(gè)維度：參照WHO生存量表的內(nèi)涵，結(jié)合中國文化及吸毒者的特定情況，量表包括以下四個(gè)維度： 軀體機(jī)能、精神心理功能、社會(huì)功能（社會(huì)支持和適應(yīng)、家庭、工作）、戒毒癥狀和毒副反應(yīng) 4. 自評(píng)量表 5. 量表的可用性：簡單、實(shí)用，有一定的信度、效度和反應(yīng)度。第16頁，共52頁。舉例：吸毒者生存質(zhì)量測定量表的制定二、量表的制定方法及步驟 1

7、. 條目的選擇及初篩 成立研究小組：有關(guān)專家、教師、醫(yī)生、戒毒所工作人員。 通過選題小組，結(jié)合生存質(zhì)量量表、心理測量量表、中國文化以及吸毒者的特定情況，初步提出102個(gè)條目構(gòu)成條目池。 通過議題小組對(duì)各個(gè)條目進(jìn)行議論和評(píng)分，并對(duì)10個(gè)吸毒者有關(guān)條目進(jìn)行預(yù)試性回答，刪除得分較低的條目，刪除或修改難于理解或不恰當(dāng)?shù)臈l目，結(jié)果保留65個(gè)條目，增加一個(gè)條目反應(yīng)自我評(píng)估總健康狀態(tài)。第17頁，共52頁。舉例：吸毒者生存質(zhì)量測定量表的制定二、量表的制定方法及步驟 1. 條目的選擇及初篩 2. 預(yù)試驗(yàn)及條目再篩選 從某戒毒所隨機(jī)選取了157名吸毒者進(jìn)行了測試，根據(jù)測試結(jié)果對(duì)條目進(jìn)行了再篩選。第18頁，共52頁

8、。二、量表的制定步驟1、明確研究對(duì)象及目的2、設(shè)立研究工作組3、測定概念的定義及分解：包括領(lǐng)域和方面4、提出量表?xiàng)l目，形成條目池5、確定條目的形式及答案選項(xiàng)6、指標(biāo)分析及篩選：對(duì)條目池的各條目用統(tǒng)計(jì)學(xué)方法進(jìn)行分析及篩查，以篩出的指標(biāo)構(gòu)成初步量表。7、預(yù)調(diào)查和量表考評(píng)：用初步量表進(jìn)行預(yù)調(diào)查，由此對(duì)量表的信度、效度、反應(yīng)度等進(jìn)行考評(píng)。8、修改完善：形成最終測定量表。第19頁，共52頁。三、條目篩查方法主觀評(píng)價(jià)法：由專家和研究對(duì)象獨(dú)立地對(duì)所提出的各個(gè)被選指標(biāo)根據(jù)自己認(rèn)為的重要性按百分制進(jìn)行打分，根據(jù)各指標(biāo)的重要性得分來挑選指標(biāo)，舍去得分較低的指標(biāo)。離散趨勢(shì)法：指標(biāo)的離散趨勢(shì)小，用于評(píng)價(jià)的區(qū)別能力就差

9、。因此選擇離散趨勢(shì)較大的指標(biāo)。第20頁，共52頁。三、條目篩查方法相關(guān)系數(shù)法： 計(jì)算任兩個(gè)指標(biāo)相關(guān)系數(shù)并作統(tǒng)計(jì)檢驗(yàn)，以與之相關(guān)的指標(biāo)個(gè)數(shù)較多的和較少者作為被選指標(biāo)。因?yàn)榍罢哂写硇?，可能提供較多的信息；后者有獨(dú)立性，為其它指標(biāo)所不能代替。主成分分析與因子分析：根據(jù)量表的設(shè)想結(jié)構(gòu)及貢獻(xiàn)率的大小確定所需的主成分?jǐn)?shù)，然后根據(jù)各主成分與各指標(biāo)的相關(guān)性大小分別考慮各個(gè)主成分主要由那些指標(biāo)決定。第21頁，共52頁。三、條目篩查方法聚類分析法：把指標(biāo)聚為一定數(shù)目的類別，然后選擇每一類中代表指標(biāo)作為入選指標(biāo)。 原則：以每類中與其它指標(biāo)相關(guān)性最好的指標(biāo)作為代表指標(biāo)；以類內(nèi)相關(guān)系數(shù)較好，而類間相關(guān)系數(shù)較差的指標(biāo)為

10、代表指標(biāo)。第22頁，共52頁。三、條目篩查方法基于重要性評(píng)價(jià)的逐步篩選法：該法是1法的直間推廣，類似德爾斐（Delphi）預(yù)測法。即先進(jìn)行1法，選出得分較高的指標(biāo)，將選出的指標(biāo)反饋給評(píng)價(jià)者，再進(jìn)行第二輪篩選，這樣逐步進(jìn)行下去，即可得到較公認(rèn)的重要指標(biāo)。第23頁，共52頁。三、條目篩查方法逐步回歸分析法：通過預(yù)調(diào)查得到一批數(shù)據(jù)，將總的評(píng)分作為因變量（Y），然后用y與各指標(biāo)（X1,X2Xn)進(jìn)行逐步回歸分析，篩出對(duì)y影響較大的指標(biāo)。逐步判別分析：在預(yù)調(diào)查中包括不同的人群（如包括病人和正常人），用逐步判別分析篩出對(duì)于判別這兩類人貢獻(xiàn)較大的指標(biāo)。第24頁，共52頁。量表性質(zhì)的考核第25頁，共52頁。一

11、、可行性（feasibility）量表接受率：量表被所測定對(duì)象接受情況，實(shí)際操作中以量表的回收率表示。通常要求達(dá)到85%以上。量表完成率：接受調(diào)查對(duì)象完成量表的比例。通常要求達(dá)到85%以上。完成量表的時(shí)間：完成一份量表的時(shí)間控制在20分鐘以內(nèi)較易被人接受。第26頁，共52頁。二、信度（reliability）信度也可理解為可靠度，或統(tǒng)計(jì)上所說的精確度。重測信度（test-retest reliability） 也稱檢驗(yàn)-再檢驗(yàn) 計(jì)算同一批對(duì)象兩次測量結(jié)果的相關(guān)系數(shù)。即兩批數(shù)據(jù)總分值的相關(guān)系數(shù)。 如果達(dá)到0.7以上認(rèn)為信度好。第27頁，共52頁。二、信度（reliability） 重測信度的不足

12、：第一次測量可能影響第二次測量。有些事物本身是在變化的，或說事物的真值在兩個(gè)不同的時(shí)點(diǎn)就是不同的。第28頁，共52頁。二、信度（reliability）分半信度（split-half reliability） 也稱切半法 檢驗(yàn)量表跨條目的一致性。 將量表按奇數(shù)指標(biāo)為一組，偶數(shù)指標(biāo)為一組，分成兩個(gè) “半量表”，分半信度即是從檢驗(yàn)兩個(gè)半量表得分的相關(guān)性來檢驗(yàn)量表的信度。 計(jì)算公式：R = 2Rh / (1+Rh) 其中：Rh為兩個(gè)半量表得分的相關(guān)系數(shù)。SPSS軟件可直接計(jì)算分半信度。第29頁，共52頁。二、信度（reliability）3. 克郎巴赫系數(shù) （cronbch ）： 此系數(shù)表示量表的內(nèi)

13、在一致性 （internal consistency）。 SPSS軟件可直接計(jì)算克郎巴赫系數(shù) 值， 多大為好尚有爭論，一般生物性研究=0.7 可視為較好第30頁，共52頁。三、效度（validity）效度也可理解為準(zhǔn)確度。內(nèi)容效度（content validity）: 量表中的每一條目是否反映了它想表達(dá)的內(nèi)容，也就是說對(duì)大多數(shù)測定對(duì)象來說，對(duì)量表中的每一個(gè)問題的理解是否與我們想象的一致。 常以專家評(píng)議為依據(jù)。第31頁，共52頁。 2、標(biāo)準(zhǔn)關(guān)聯(lián)效度 （criterion-related validity） 也稱標(biāo)準(zhǔn)效度 以一個(gè)公認(rèn)有效的量表作為標(biāo)準(zhǔn)，檢驗(yàn)新量表與標(biāo)準(zhǔn)量表測定結(jié)果的相關(guān)性，用兩種測

14、定工具測得總分的相關(guān)系數(shù)來表示。第32頁，共52頁。3、結(jié)構(gòu)效度（construct validity） 也稱構(gòu)想效度根據(jù)研究者所構(gòu)想的量表結(jié)構(gòu)與測定結(jié)果的吻合程度。通常采用因子分析來評(píng)價(jià)。如果因子分析結(jié)果顯示，提取的若干公因子所包含的條目存在研究者所預(yù)想的連帶關(guān)系或邏輯關(guān)系，可認(rèn)為該量表具有結(jié)構(gòu)效度，同時(shí)具有內(nèi)容效度。結(jié)構(gòu)效度通常被認(rèn)為是最強(qiáng)有力的效度評(píng)價(jià)。第33頁，共52頁。4、反應(yīng)度分析（responsibility）量表能測出微小變化的能力。有學(xué)者認(rèn)為反應(yīng)度為效標(biāo)效度，是效度的一種。第34頁，共52頁。常從以下兩方面考察量表的反應(yīng)度： 區(qū)分同一個(gè)體（或群體）隨時(shí)間的改變, 用于評(píng)價(jià)醫(yī)學(xué)

15、干預(yù)前后的效果。 量表應(yīng)能區(qū)分已知的不同兩類人群， 如：健康人和病人的生存質(zhì)量。第35頁，共52頁。舉例吸毒人群生存質(zhì)量的測評(píng)第36頁，共52頁。一、吸毒者生存質(zhì)量量表的制定制定的目的和構(gòu)思吸毒者生存質(zhì)量評(píng)定工具探討戒毒模式量表含4個(gè)維度（領(lǐng)域） & 軀體機(jī)能：軀體運(yùn)動(dòng)和感官功能、食與性、睡眠與精力； & 精神心理功能：情緒、認(rèn)知、精神應(yīng)急量、自尊； & 社會(huì)功能：社會(huì)支持和適應(yīng)，家庭和工作等； & 戒毒癥狀和毒副作用第37頁，共52頁。量表為自評(píng)式：各條目按5級(jí)Likert法排列。量表的可用性： 簡明扼要 實(shí)用性和可操作性 有一定信度、效度和反應(yīng)度第38頁，共52頁。二、吸毒人群生存質(zhì)量量表

16、 制定方法與步驟條目的選擇與初篩 研究組:專家、教師、醫(yī)生、戒毒所工作人員 & 選題小組：參考國外公認(rèn)的生存質(zhì)量量表和心理測量表并結(jié)合我國的文化特征和吸毒者的特殊情況。 提出102個(gè)條目池。 & 議題小組：對(duì)各條目進(jìn)行議論和評(píng)分。 & 吸毒者對(duì)條目進(jìn)行預(yù)試性回答 結(jié)果保留65個(gè)條目 第39頁，共52頁。2、預(yù)試及條目再篩選在昆明市戒毒所隨機(jī)選擇157名吸毒者進(jìn)行測試具體方法:變異度法: 計(jì)算標(biāo)準(zhǔn)差并刪除標(biāo)準(zhǔn)差小的條目; 用s反映變異度，剔除了s1.25的條目重要性評(píng)分法: 計(jì)算各條目均分，刪除均分低的;相關(guān)系數(shù)法: 計(jì)算各條目與其維度得分的相關(guān)系數(shù); 刪除相關(guān)系數(shù)低于0.4的條目;第40頁，共

17、52頁。2、預(yù)試及條目再篩選逐步回歸分析法: 各條目的得分與量表總分作逐步回歸分析, 選出對(duì)總分貢獻(xiàn)大的條目;因子分析法: 對(duì)65個(gè)條目作因子分析, 并作方差最大旋轉(zhuǎn), 刪除在各因子上負(fù)荷系數(shù)較小(0.4)的條目及在兩個(gè)或以上因子上負(fù)荷系數(shù)相近而無特異性的條目。第41頁，共52頁。3、吸毒人群生存質(zhì)量量表用上述 5 種方法分別篩選出：變異度法: 50個(gè)條目重要性評(píng)分法: 44個(gè)條目相關(guān)系數(shù)法: 53個(gè)條目逐步回歸分析法: 43個(gè)條目因子分析法: 48個(gè)條目第42頁，共52頁。決定量表入選條目的原則：至少三種方法選出者作為必選條目只有兩種或一種方法選出者結(jié)合專業(yè)知識(shí)和因子分析結(jié)果（如該條目的加入

18、或去除對(duì)因子分析的累積貢獻(xiàn)率影響的大?。﹣碜们榭紤]。第43頁，共52頁。最后量表保留4個(gè)領(lǐng)域（維度）40個(gè)條目：& 軀體機(jī)能（PH）：9個(gè)條目& 精神心理功能（PS） ： 9個(gè)條目& 社會(huì)功能（ST） ： 11個(gè)條目& 戒毒癥狀和毒副作用（SO） ： 11個(gè)條目增加一條總體健康的自我評(píng)價(jià)第44頁，共52頁。三、量表的考評(píng)效度分析內(nèi)容效度：有關(guān)各方面人員參與選題和討論，提出的條目池反映了WHO的內(nèi)涵及吸毒者的特殊問題，并按程序化方式篩選，所以可以認(rèn)為具有較好的內(nèi)容效度。維度相關(guān)性：各條目得分與其維度得分之間相關(guān)均較大（相關(guān)系數(shù)r均在0.6以上），而與其它維度相關(guān)較小。第45頁，共52頁。因子分析

19、：因子分析篩出7個(gè)主成分，累計(jì)貢獻(xiàn)率達(dá)66.7%。第一主成分：戒毒癥狀和毒副作用維度，方差貢獻(xiàn)38.8%；第二主成分：軀體功能維度，方差貢獻(xiàn)7.4%；第三主成分：心理功能維度，方差貢獻(xiàn)5.0%；第四主成分：社會(huì)功能維度，方差貢獻(xiàn)3.8%；第五主成分：社會(huì)功能維度中家庭和親朋關(guān)系；第六主成分：社會(huì)功能維度中社會(huì)環(huán)境；第七主成分：心理功能中較重要的憂慮和抑郁方面。 說明量表的結(jié)構(gòu)與設(shè)計(jì)時(shí)相吻合，因此認(rèn)為具有較好的結(jié)構(gòu)效度。第46頁，共52頁。效標(biāo)效度（標(biāo)準(zhǔn)效度）因?yàn)闆]有金標(biāo)準(zhǔn)，本研究采用WHOQOL-100 和 SF-36為標(biāo)準(zhǔn)結(jié)果：本量表與WHOQOL-100的相關(guān)系數(shù)r=0.73;本量表與SF

20、-36 的相關(guān)系數(shù)r=0.71。第47頁，共52頁。2、信度分析重測信度： 軀體功能：重測相關(guān)系數(shù) r = 0.80 心理功能：重測相關(guān)系數(shù) r = 0.64 戒毒癥狀：重測相關(guān)系數(shù) r = 0.78 社會(huì)功能：重測相關(guān)系數(shù) r = 0.76 總分：重測相關(guān)系數(shù) r = 0.82 經(jīng)配對(duì)t檢驗(yàn)兩次得分均值間差異均無統(tǒng)計(jì)學(xué)意義，說明兩次測得結(jié)果一致。第48頁，共52頁。分半信度：將條目按奇偶順序分為兩半，計(jì)算兩部分條目得分的相關(guān)系數(shù) R = 0.95 內(nèi)部一致性： 四個(gè)維度的克郎巴赫系數(shù)分別為： 軀體功能：0.87 心理功能：0.89 戒毒癥狀：0.93 社會(huì)功能：0.86第49頁，共52頁。3、反應(yīng)度分析維度戒毒前戒毒12天均數(shù)標(biāo)準(zhǔn)差均數(shù)標(biāo)準(zhǔn)差軀體功能24.868.7631.637.70心理功能24.457.8728.618.07戒毒癥狀30.6311.3041.1810.85社會(huì)功能35.5810.9939.8810.44總生存質(zhì)量115.5233.53141.3233.57注：經(jīng)配對(duì) t 檢驗(yàn) p 均小于0.001第50頁，共52頁。參考書現(xiàn)場調(diào)查技術(shù)/詹紹康主編. 上海 復(fù)旦大學(xué)出版社生存質(zhì)量測定方法及應(yīng)用/方積乾主編. 北京 北京醫(yī)科大學(xué)出版社第51頁，共52頁。每一次的加油，每一次的努力都是為了下一次更好的自己。7月-227月-22Friday, Ju