量表的信度與效度分析計(jì)算[實(shí)用解決]

1、量表的信度與效度計(jì)算分析量表的信度與效度計(jì)算分析 1各行借鑒 一、信度（一、信度（reliability）定義）定義 若重復(fù)進(jìn)行測(cè)量，產(chǎn)生相同結(jié)果的準(zhǔn)確程度若重復(fù)進(jìn)行測(cè)量，產(chǎn)生相同結(jié)果的準(zhǔn)確程度 測(cè)量的可靠性、穩(wěn)定性和預(yù)測(cè)性測(cè)量的可靠性、穩(wěn)定性和預(yù)測(cè)性 測(cè)量的精確度測(cè)量的精確度 反復(fù)測(cè)量結(jié)果的穩(wěn)定性或一致性可能很高反復(fù)測(cè)量結(jié)果的穩(wěn)定性或一致性可能很高 但卻可能是不準(zhǔn)確的但卻可能是不準(zhǔn)確的 用零點(diǎn)沒(méi)有調(diào)整在中心的秤來(lái)測(cè)量重量用零點(diǎn)沒(méi)有調(diào)整在中心的秤來(lái)測(cè)量重量 采用有明顯導(dǎo)向性的問(wèn)答題組成的量表測(cè)量態(tài)度采用有明顯導(dǎo)向性的問(wèn)答題組成的量表測(cè)量態(tài)度 2各行借鑒 二、效度（二、效度（validity）定

2、義）定義 所測(cè)量的是不是研究者所想要的所測(cè)量的是不是研究者所想要的 在多大程度上給出了他在多大程度上給出了他/她所想要的她所想要的 例如，研究者希望測(cè)量電視廣告的傳播效果例如，研究者希望測(cè)量電視廣告的傳播效果 目的：目的：了解廣告能否引起目標(biāo)消費(fèi)群的購(gòu)買欲望了解廣告能否引起目標(biāo)消費(fèi)群的購(gòu)買欲望 消費(fèi)者的購(gòu)物決策是否與觀看的電視廣告相關(guān)消費(fèi)者的購(gòu)物決策是否與觀看的電視廣告相關(guān) 如果：如果：最終測(cè)得的不是廣告對(duì)消費(fèi)者購(gòu)物決策的影響最終測(cè)得的不是廣告對(duì)消費(fèi)者購(gòu)物決策的影響 而主要是消費(fèi)者對(duì)廣告藝術(shù)感染力的評(píng)價(jià)而主要是消費(fèi)者對(duì)廣告藝術(shù)感染力的評(píng)價(jià) 結(jié)論：結(jié)論：所用量表是無(wú)效的或是效度很低的所用量表是無(wú)

3、效的或是效度很低的 3各行借鑒 信度高時(shí)效度不一定高信度高時(shí)效度不一定高 但效度高時(shí)信度一定高但效度高時(shí)信度一定高 4各行借鑒 從三個(gè)方面來(lái)分析測(cè)量的信度從三個(gè)方面來(lái)分析測(cè)量的信度 穩(wěn)定性穩(wěn)定性 (stability) 內(nèi)在一致性內(nèi)在一致性 (internal consistency) 等價(jià)性等價(jià)性 (equivalency) 三、信度評(píng)價(jià)三、信度評(píng)價(jià) 5各行借鑒 1、穩(wěn)定性分析、穩(wěn)定性分析 也叫做測(cè)驗(yàn)也叫做測(cè)驗(yàn)-再測(cè)驗(yàn)法再測(cè)驗(yàn)法 目的：目的： 考察對(duì)于同樣的問(wèn)答題（或測(cè)試）考察對(duì)于同樣的問(wèn)答題（或測(cè)試） 對(duì)同一組被訪者或受測(cè)試者對(duì)同一組被訪者或受測(cè)試者 前后兩次測(cè)量的結(jié)果是否基本一致前后兩次

4、測(cè)量的結(jié)果是否基本一致 6各行借鑒 1、穩(wěn)定性分析、穩(wěn)定性分析 方法：方法： 用用“再測(cè)信度再測(cè)信度”來(lái)測(cè)量穩(wěn)定性來(lái)測(cè)量穩(wěn)定性 再測(cè)信度：再測(cè)信度：兩次測(cè)量結(jié)果間的相關(guān)系數(shù)兩次測(cè)量結(jié)果間的相關(guān)系數(shù) 相關(guān)系數(shù)越接近相關(guān)系數(shù)越接近 1，表示穩(wěn)定性越好，表示穩(wěn)定性越好 7各行借鑒 1、穩(wěn)定性分析、穩(wěn)定性分析 缺點(diǎn)：缺點(diǎn)： 一般應(yīng)用中很難真正實(shí)現(xiàn)一般應(yīng)用中很難真正實(shí)現(xiàn)（人力、財(cái)力、時(shí)間）（人力、財(cái)力、時(shí)間） 再測(cè)信度的應(yīng)用有局限性再測(cè)信度的應(yīng)用有局限性 第一次的測(cè)量可能會(huì)影響到第二次第一次的測(cè)量可能會(huì)影響到第二次（信度偏高）（信度偏高） 兩次測(cè)量間客觀的情況可能有變化兩次測(cè)量間客觀的情況可能有變化（信

5、度偏低）（信度偏低） 8各行借鑒 2、內(nèi)在一致性分析、內(nèi)在一致性分析 目的：目的：檢驗(yàn)多項(xiàng)目量表中各個(gè)項(xiàng)目的一致性檢驗(yàn)多項(xiàng)目量表中各個(gè)項(xiàng)目的一致性 可信的量表的項(xiàng)目必須具有內(nèi)在一致性可信的量表的項(xiàng)目必須具有內(nèi)在一致性 9各行借鑒 2、內(nèi)在一致性分析、內(nèi)在一致性分析 方法之一：折半法方法之一：折半法 (split-half technique) 將量表中的項(xiàng)目分成兩半將量表中的項(xiàng)目分成兩半 計(jì)算這兩部分的總得分的相關(guān)系數(shù)計(jì)算這兩部分的總得分的相關(guān)系數(shù)rh 如果量表具有較高的內(nèi)在一致性如果量表具有較高的內(nèi)在一致性 那么這兩部分應(yīng)該是高度相關(guān)的那么這兩部分應(yīng)該是高度相關(guān)的 10各行借鑒 2、內(nèi)在一致

6、性分析、內(nèi)在一致性分析 方法之一：折半法方法之一：折半法 (split-half technique) 優(yōu)點(diǎn)：不需要重復(fù)的測(cè)量?jī)?yōu)點(diǎn)：不需要重復(fù)的測(cè)量 常用分法：按項(xiàng)目號(hào)的前后順序分常用分法：按項(xiàng)目號(hào)的前后順序分 或按項(xiàng)目號(hào)的奇偶性分或按項(xiàng)目號(hào)的奇偶性分 計(jì)算公式：計(jì)算公式： ru = 2rh / (1 + rh) 11各行借鑒 2、內(nèi)在一致性分析、內(nèi)在一致性分析 方法之一：折半法方法之一：折半法 (split-half technique) 注意：需先將量表中的反意題作逆向處理注意：需先將量表中的反意題作逆向處理 再分別計(jì)算兩部分的總得分再分別計(jì)算兩部分的總得分 前提假設(shè)：前提假設(shè)：兩半題項(xiàng)得

7、分方差大致相等兩半題項(xiàng)得分方差大致相等 否則可能會(huì)低估信度系數(shù)否則可能會(huì)低估信度系數(shù) 12各行借鑒 2、內(nèi)在一致性分析、內(nèi)在一致性分析 方法之二：方法之二：alpha信度系數(shù)法信度系數(shù)法 克朗巴哈提出用克朗巴哈提出用系數(shù)來(lái)測(cè)量累加量表的信度系數(shù)來(lái)測(cè)量累加量表的信度 = K (1 - i2/T2)/(K-1) K K 量表中題（項(xiàng)目）的總數(shù)量表中題（項(xiàng)目）的總數(shù) i i2 2 第第i i個(gè)題（項(xiàng)目）得分的題內(nèi)方差個(gè)題（項(xiàng)目）得分的題內(nèi)方差 i i2 2 K K個(gè)題項(xiàng)的方差之和個(gè)題項(xiàng)的方差之和 T T2 2 總得分（所有題項(xiàng)得分之和）的方差總得分（所有題項(xiàng)得分之和）的方差 信度系數(shù)是評(píng)估量表內(nèi)部一

8、致性的比較常用系數(shù)信度系數(shù)是評(píng)估量表內(nèi)部一致性的比較常用系數(shù) 13各行借鑒 2、內(nèi)在一致性分析、內(nèi)在一致性分析 方法之三：平均相關(guān)系數(shù)法方法之三：平均相關(guān)系數(shù)法 缺點(diǎn)：偏重于項(xiàng)目之間的相關(guān)缺點(diǎn)：偏重于項(xiàng)目之間的相關(guān) 而不是整個(gè)量表的信度而不是整個(gè)量表的信度 項(xiàng)目越多，平均相關(guān)系數(shù)就可能越高項(xiàng)目越多，平均相關(guān)系數(shù)就可能越高 提高信度的方法之一：提高信度的方法之一： 增加量表中的測(cè)量項(xiàng)目增加量表中的測(cè)量項(xiàng)目 因?yàn)楦鱾€(gè)項(xiàng)目的隨機(jī)誤差可能會(huì)相互抵消因?yàn)楦鱾€(gè)項(xiàng)目的隨機(jī)誤差可能會(huì)相互抵消 14各行借鑒 2、內(nèi)在一致性分析、內(nèi)在一致性分析 小結(jié)：小結(jié)： 信度的高低既依賴于項(xiàng)目的內(nèi)在一致性信度的高低既依賴于項(xiàng)

9、目的內(nèi)在一致性 也依賴于量表的長(zhǎng)度也依賴于量表的長(zhǎng)度 因此：因此： 一方面盡量設(shè)計(jì)內(nèi)在相關(guān)性更高的項(xiàng)目一方面盡量設(shè)計(jì)內(nèi)在相關(guān)性更高的項(xiàng)目 另一方面也可以考慮適當(dāng)增加項(xiàng)目的數(shù)量另一方面也可以考慮適當(dāng)增加項(xiàng)目的數(shù)量 15各行借鑒 3、等價(jià)性分析、等價(jià)性分析 A 當(dāng)使用兩種不同的量表去測(cè)量同一概念時(shí)，這當(dāng)使用兩種不同的量表去測(cè)量同一概念時(shí)，這 兩種量表是否等價(jià)？?jī)煞N量表是否等價(jià)？ 方法：在同一時(shí)段中，讓同一組被訪者接受兩種量表方法：在同一時(shí)段中，讓同一組被訪者接受兩種量表 的測(cè)試；計(jì)算兩組得分之間的相關(guān)，用于評(píng)價(jià)信度的測(cè)試；計(jì)算兩組得分之間的相關(guān)，用于評(píng)價(jià)信度 B 當(dāng)兩個(gè)評(píng)分者（或編碼員）判斷同一現(xiàn)

10、象時(shí)，當(dāng)兩個(gè)評(píng)分者（或編碼員）判斷同一現(xiàn)象時(shí)， 評(píng)價(jià)結(jié)果是否一致？評(píng)價(jià)結(jié)果是否一致？ 方法：計(jì)算兩個(gè)評(píng)分者評(píng)分之間的相關(guān)；或計(jì)算兩個(gè)方法：計(jì)算兩個(gè)評(píng)分者評(píng)分之間的相關(guān)；或計(jì)算兩個(gè) 編碼員編碼結(jié)果一致的比例，用于評(píng)價(jià)信度編碼員編碼結(jié)果一致的比例，用于評(píng)價(jià)信度 16各行借鑒 3、等價(jià)性分析、等價(jià)性分析 前一種應(yīng)用前一種應(yīng)用A比較少見(jiàn)（構(gòu)造等價(jià)的量表比較少見(jiàn)（構(gòu)造等價(jià)的量表 非常困難）非常困難） 后一種應(yīng)用后一種應(yīng)用B比較常見(jiàn)，也稱為比較常見(jiàn)，也稱為 評(píng)分者內(nèi)在信度評(píng)分者內(nèi)在信度 (inter-rater reliability) 編碼員間信度編碼員間信度 (inter-coder reliabil

11、ity) 17各行借鑒 3、等價(jià)性分析、等價(jià)性分析 在內(nèi)容分析中，要評(píng)價(jià)編碼員間信度在內(nèi)容分析中，要評(píng)價(jià)編碼員間信度 編碼：編碼：將分析單位（如單詞、符號(hào)、主題等）將分析單位（如單詞、符號(hào)、主題等） 置于各種內(nèi)容類別中置于各種內(nèi)容類別中 不同的編碼者獨(dú)立地編碼不同的編碼者獨(dú)立地編碼 如果能得到比較一致的結(jié)果如果能得到比較一致的結(jié)果 則信度較高則信度較高 18各行借鑒 3、等價(jià)性分析、等價(jià)性分析-編碼者間信度的計(jì)算公式編碼者間信度的計(jì)算公式 霍斯提霍斯提(Holsti)公式公式 假定兩個(gè)編碼員分別同時(shí)做了假定兩個(gè)編碼員分別同時(shí)做了m1和和m2個(gè)個(gè) 單位的編碼，其中一致的編碼數(shù)為單位的編碼，其中一

12、致的編碼數(shù)為m，則，則 編碼者間信度編碼者間信度 = 2m / (m1 + m2) 19各行借鑒 3、等價(jià)性分析、等價(jià)性分析-編碼者間信度的計(jì)算公式編碼者間信度的計(jì)算公式 霍斯提霍斯提(Holsti)公式公式 優(yōu)點(diǎn)：計(jì)算簡(jiǎn)單、易于操作優(yōu)點(diǎn)：計(jì)算簡(jiǎn)單、易于操作 缺點(diǎn)：信度的大小可能與編碼時(shí)所用的類別的數(shù)目有關(guān)缺點(diǎn)：信度的大小可能與編碼時(shí)所用的類別的數(shù)目有關(guān) 類別的數(shù)目越少，由于偶然性而造成一致的可能性就越大類別的數(shù)目越少，由于偶然性而造成一致的可能性就越大 編碼問(wèn)題都是兩個(gè)類別時(shí)，隨機(jī)的編碼也可能有編碼問(wèn)題都是兩個(gè)類別時(shí)，隨機(jī)的編碼也可能有50%的信度的信度 在五個(gè)類別的情況，隨機(jī)的編碼就只可能

13、有在五個(gè)類別的情況，隨機(jī)的編碼就只可能有20%左右的信度左右的信度 20各行借鑒 3、等價(jià)性分析、等價(jià)性分析-編碼者間信度的計(jì)算公式編碼者間信度的計(jì)算公式 史考特史考特(Scott)指數(shù)指數(shù) 編碼員間信度編碼員間信度 = (o - e)/(1 - e) = (o - e)/(1 - e) oo：觀測(cè)到的觀測(cè)到的一致性或叫實(shí)際一致性（一致性或叫實(shí)際一致性（用用霍斯提公式霍斯提公式計(jì)算）計(jì)算） ee：純粹由于純粹由于偶然性偶然性而造成的一致性或叫期望一致性而造成的一致性或叫期望一致性 （等于每個(gè)類別出現(xiàn)的相對(duì)頻率的平方和）等于每個(gè)類別出現(xiàn)的相對(duì)頻率的平方和） 21各行借鑒 3、等價(jià)性分析、等價(jià)性分

14、析-編碼者間信度的計(jì)算公式編碼者間信度的計(jì)算公式 利用霍斯特公式計(jì)算時(shí)，一般信度在利用霍斯特公式計(jì)算時(shí)，一般信度在90%90%或以上或以上 利用史考特公式計(jì)算時(shí)，信度大都是利用史考特公式計(jì)算時(shí)，信度大都是75%75%或以上或以上 考察編碼員內(nèi)考察編碼員內(nèi)(intra-coder)(intra-coder)信度時(shí)信度時(shí) 讓同一個(gè)編碼員在不同的時(shí)間內(nèi)對(duì)同一個(gè)資料編碼兩次讓同一個(gè)編碼員在不同的時(shí)間內(nèi)對(duì)同一個(gè)資料編碼兩次 然后借助以上公式計(jì)算編碼然后借助以上公式計(jì)算編碼- -再編碼信度再編碼信度 將上式中對(duì)應(yīng)兩個(gè)編碼員的數(shù)據(jù)，將上式中對(duì)應(yīng)兩個(gè)編碼員的數(shù)據(jù)， 改為同一編碼員的兩次數(shù)據(jù)改為同一編碼員的兩次

15、數(shù)據(jù) 22各行借鑒 例例 在一項(xiàng)少兒電視節(jié)目?jī)?nèi)容分析的編碼表中，兩個(gè)編碼員在一項(xiàng)少兒電視節(jié)目?jī)?nèi)容分析的編碼表中，兩個(gè)編碼員 分別同時(shí)獨(dú)立地將分別同時(shí)獨(dú)立地將100100個(gè)少兒節(jié)目分配到如下三個(gè)類別中：個(gè)少兒節(jié)目分配到如下三個(gè)類別中：1 1、 單本劇單本劇 2 2、連續(xù)劇、連續(xù)劇 3 3、系列劇。已知編碼不一致的節(jié)目共、系列劇。已知編碼不一致的節(jié)目共 計(jì)計(jì)8 8個(gè)；這三個(gè)類別的節(jié)目數(shù)分別占個(gè)；這三個(gè)類別的節(jié)目數(shù)分別占30%30%、45%45%和和25%25%。試分別。試分別 利用霍斯提和史考特公式，評(píng)價(jià)這兩個(gè)編碼員編碼的等價(jià)性。利用霍斯提和史考特公式，評(píng)價(jià)這兩個(gè)編碼員編碼的等價(jià)性。 解：解： m

16、1= m2 =100, m = 100-8 = 92 霍斯提信度霍斯提信度 = 2m/(m1 + m2)=2(92)/(100+100)=0.92 o = 0.92, e = (0.30) o = 0.92, e = (0.30)2 2+(0.45)+(0.45)2 2+(0.25)+(0.25)2 2=0.355=0.355 史考特信度史考特信度 = (o - e)/(1 - e) = (o - e)/(1 - e) = (0.92-0.355)/(1-0.355) = 0.876= (0.92-0.355)/(1-0.355) = 0.876 23各行借鑒 效度主要有三種類型：效度主要有三

17、種類型： 內(nèi)容效度內(nèi)容效度 (content validity) 效標(biāo)效度效標(biāo)效度 (criterion validity) 結(jié)構(gòu)效度結(jié)構(gòu)效度 (construct validity) 四、效度評(píng)價(jià)四、效度評(píng)價(jià) 24各行借鑒 1、內(nèi)容效度、內(nèi)容效度 也叫做表面效度也叫做表面效度(face validity) 用最簡(jiǎn)單的也是最基本的主觀判斷的方法用最簡(jiǎn)單的也是最基本的主觀判斷的方法 一般根據(jù)測(cè)量量表所選的題項(xiàng)來(lái)判斷一般根據(jù)測(cè)量量表所選的題項(xiàng)來(lái)判斷 僅從表面上來(lái)觀察判斷其是否能夠代表想僅從表面上來(lái)觀察判斷其是否能夠代表想 要測(cè)量的內(nèi)容或主題要測(cè)量的內(nèi)容或主題 25各行借鑒 1、內(nèi)容效度、內(nèi)容效度

18、盡量收集和閱讀與測(cè)量?jī)?nèi)容有關(guān)的資料盡量收集和閱讀與測(cè)量?jī)?nèi)容有關(guān)的資料 除了研究人員的主觀判斷之外除了研究人員的主觀判斷之外 最好再請(qǐng)一些專家來(lái)幫助判斷最好再請(qǐng)一些專家來(lái)幫助判斷 26各行借鑒 1、內(nèi)容效度、內(nèi)容效度 單項(xiàng)與總和相關(guān)效度分析法單項(xiàng)與總和相關(guān)效度分析法 確定各個(gè)具體的題項(xiàng)對(duì)整個(gè)量表的效度是否確定各個(gè)具體的題項(xiàng)對(duì)整個(gè)量表的效度是否 都有足夠的貢獻(xiàn)都有足夠的貢獻(xiàn) 或考察量表內(nèi)的題項(xiàng)是否具有同質(zhì)性或考察量表內(nèi)的題項(xiàng)是否具有同質(zhì)性 計(jì)算每個(gè)題項(xiàng)的得分與總分的相關(guān)系數(shù)計(jì)算每個(gè)題項(xiàng)的得分與總分的相關(guān)系數(shù) 如果相關(guān)不顯著，表示該題項(xiàng)的鑒別力低，最好剔除如果相關(guān)不顯著，表示該題項(xiàng)的鑒別力低，最好剔

19、除 題項(xiàng)與總和的相關(guān)關(guān)系越顯著，量表的內(nèi)容效度也越高題項(xiàng)與總和的相關(guān)關(guān)系越顯著，量表的內(nèi)容效度也越高 27各行借鑒 1、內(nèi)容效度、內(nèi)容效度 例如，例如，1993年卜衛(wèi)等在廈門(mén)受眾調(diào)查問(wèn)卷中（見(jiàn)年卜衛(wèi)等在廈門(mén)受眾調(diào)查問(wèn)卷中（見(jiàn) “媒介媒介人人現(xiàn)代化現(xiàn)代化”），設(shè)計(jì)了一個(gè)四級(jí)李克動(dòng)機(jī)），設(shè)計(jì)了一個(gè)四級(jí)李克動(dòng)機(jī) 量表，以測(cè)試廈門(mén)受眾的媒介使用動(dòng)機(jī)。量表，以測(cè)試廈門(mén)受眾的媒介使用動(dòng)機(jī)。表中的受表中的受 眾媒介動(dòng)機(jī)量表就是剔除了不合格題項(xiàng)后的量表，眾媒介動(dòng)機(jī)量表就是剔除了不合格題項(xiàng)后的量表， 表中的各個(gè)題項(xiàng)的得分與總分都是顯著相關(guān)的（概表中的各個(gè)題項(xiàng)的得分與總分都是顯著相關(guān)的（概 值值P0.001），說(shuō)

20、明量表內(nèi)的各個(gè)題項(xiàng)之間具有），說(shuō)明量表內(nèi)的各個(gè)題項(xiàng)之間具有 較好的同質(zhì)性。較好的同質(zhì)性。 28各行借鑒 表表 廈門(mén)受眾的媒介使用動(dòng)機(jī)廈門(mén)受眾的媒介使用動(dòng)機(jī)-四級(jí)李克動(dòng)機(jī)量表，以及各題項(xiàng)與總和的相關(guān)四級(jí)李克動(dòng)機(jī)量表，以及各題項(xiàng)與總和的相關(guān) 您為什么看電視、報(bào)紙或雜志，和聽(tīng)廣播呢？下列情況符合您嗎？您為什么看電視、報(bào)紙或雜志，和聽(tīng)廣播呢？下列情況符合您嗎？ 不 符合 有點(diǎn) 符合 比較 符合 非常 符合 與總和 的相關(guān) 1、為了娛樂(lè) 1 2 3 4 * 2、為了消遣 1 2 3 4 * 3、滿足好奇心 1 2 3 4 * 4、尋求購(gòu)物參考 1 2 3 4 * 5、尋求解決工作、生活問(wèn)題的方法 1 2

21、 3 4 * 6、增加新知識(shí)、新見(jiàn)聞 1 2 3 4 * 7、了解別人對(duì)各種事物的看法 1 2 3 4 * 8、了解各地的事情 1 2 3 4 * 9、了解方針政策 1 2 3 4 * 10、和家人或朋友共享欣賞或閱讀樂(lè)趣 1 2 3 4 * 11、工作時(shí)可以得到調(diào)劑 1 2 3 4 * 12、增加談話資料 1 2 3 4 * 29各行借鑒 2、效標(biāo)效度、效標(biāo)效度 也叫做效標(biāo)關(guān)聯(lián)效度或獨(dú)立標(biāo)準(zhǔn)效度也叫做效標(biāo)關(guān)聯(lián)效度或獨(dú)立標(biāo)準(zhǔn)效度 效標(biāo)效標(biāo)是一個(gè)與量表有密切關(guān)聯(lián)的是一個(gè)與量表有密切關(guān)聯(lián)的獨(dú)立標(biāo)準(zhǔn)獨(dú)立標(biāo)準(zhǔn) 將量表所測(cè)特性看成因變量將量表所測(cè)特性看成因變量 將效標(biāo)看成自變量將效標(biāo)看成自變量 所測(cè)特性

22、與效標(biāo)密切相關(guān)的量表所測(cè)特性與效標(biāo)密切相關(guān)的量表 才是有效的量表才是有效的量表 30各行借鑒 2、效標(biāo)效度的分析方法、效標(biāo)效度的分析方法 考察所測(cè)特性（因變量）與效標(biāo)（自變量）考察所測(cè)特性（因變量）與效標(biāo)（自變量） 是否有顯著的相關(guān)是否有顯著的相關(guān) (相關(guān)分析相關(guān)分析) 或是對(duì)效標(biāo)的不同取值，特性的值是否表或是對(duì)效標(biāo)的不同取值，特性的值是否表 現(xiàn)出顯著的差異現(xiàn)出顯著的差異 (t檢驗(yàn)、檢驗(yàn)、F檢驗(yàn)）檢驗(yàn)） 效標(biāo)的確定并不是一件容易的事效標(biāo)的確定并不是一件容易的事 選擇效標(biāo)一般要根據(jù)某種已知的理論、或選擇效標(biāo)一般要根據(jù)某種已知的理論、或 某種已經(jīng)得到肯定的結(jié)論某種已經(jīng)得到肯定的結(jié)論 31各行借鑒

23、2、效標(biāo)效度的舉例、效標(biāo)效度的舉例 用高考的成績(jī)，作為預(yù)測(cè)學(xué)生大學(xué)期間學(xué)業(yè)成績(jī)的效標(biāo)用高考的成績(jī)，作為預(yù)測(cè)學(xué)生大學(xué)期間學(xué)業(yè)成績(jī)的效標(biāo) （是否有（是否有研究結(jié)果表明，這兩者之間是有密切相關(guān)關(guān)系的）研究結(jié)果表明，這兩者之間是有密切相關(guān)關(guān)系的） 設(shè)計(jì)測(cè)量人們現(xiàn)代化觀念的量表時(shí)，媒介接觸行為可設(shè)計(jì)測(cè)量人們現(xiàn)代化觀念的量表時(shí)，媒介接觸行為可 能是主要的效標(biāo)之一能是主要的效標(biāo)之一 （很難設(shè)想不看報(bào)、不聽(tīng)廣播的人會(huì)具有現(xiàn)代化的觀念）很難設(shè)想不看報(bào)、不聽(tīng)廣播的人會(huì)具有現(xiàn)代化的觀念） 可考慮以媒介接觸頻度、時(shí)間、內(nèi)容等為具體的效標(biāo)可考慮以媒介接觸頻度、時(shí)間、內(nèi)容等為具體的效標(biāo) 32各行借鑒 2、效標(biāo)效度的舉例、

24、效標(biāo)效度的舉例 臺(tái)灣的臺(tái)灣的“蘭嶼民眾傳播行為與現(xiàn)代化程度之研蘭嶼民眾傳播行為與現(xiàn)代化程度之研 究究”, 用離島經(jīng)驗(yàn)作為測(cè)量雅美族人現(xiàn)代化程度用離島經(jīng)驗(yàn)作為測(cè)量雅美族人現(xiàn)代化程度 的效標(biāo)的效標(biāo) 有、無(wú)離島經(jīng)驗(yàn)的雅美族人之間有、無(wú)離島經(jīng)驗(yàn)的雅美族人之間 現(xiàn)代化程度有明顯差異的量表現(xiàn)代化程度有明顯差異的量表 才有可能是高效度的量表才有可能是高效度的量表 要剔除那些沒(méi)有顯著差異的低效度的題項(xiàng)要剔除那些沒(méi)有顯著差異的低效度的題項(xiàng) 33各行借鑒 3、結(jié)構(gòu)效度、結(jié)構(gòu)效度 評(píng)價(jià)量表測(cè)量的結(jié)果是否與理論假設(shè)或框架相關(guān)評(píng)價(jià)量表測(cè)量的結(jié)果是否與理論假設(shè)或框架相關(guān) 稱能測(cè)出結(jié)構(gòu)的量表為具有高的結(jié)構(gòu)效度的量表稱能測(cè)出

25、結(jié)構(gòu)的量表為具有高的結(jié)構(gòu)效度的量表 因子分析法因子分析法 (factor analysis) 評(píng)價(jià)量表中的各個(gè)題項(xiàng)能否有效地區(qū)分研究對(duì)象評(píng)價(jià)量表中的各個(gè)題項(xiàng)能否有效地區(qū)分研究對(duì)象 各題項(xiàng)能否有效地鑒別態(tài)度不同的被訪者？各題項(xiàng)能否有效地鑒別態(tài)度不同的被訪者？ 題項(xiàng)內(nèi)容的難易度是否合適？題項(xiàng)內(nèi)容的難易度是否合適？ 項(xiàng)目分析法項(xiàng)目分析法 (item analysis) 34各行借鑒 3、結(jié)構(gòu)效度、結(jié)構(gòu)效度-因子分析法因子分析法 因子分析法是一種高級(jí)的統(tǒng)計(jì)分析法因子分析法是一種高級(jí)的統(tǒng)計(jì)分析法 將量表中的題項(xiàng)集合成不同的群將量表中的題項(xiàng)集合成不同的群 使每一個(gè)群的變量（題項(xiàng)）共享一個(gè)公共因子使每一個(gè)群

26、的變量（題項(xiàng)）共享一個(gè)公共因子 這些公共因子就代表了量表的基本結(jié)構(gòu)這些公共因子就代表了量表的基本結(jié)構(gòu) 考察這些公共因子的意義考察這些公共因子的意義 比較量表的實(shí)際結(jié)構(gòu)與理論框架之間的異同比較量表的實(shí)際結(jié)構(gòu)與理論框架之間的異同 若兩者相吻合，且提取的公共因子有足夠的代表性若兩者相吻合，且提取的公共因子有足夠的代表性 則說(shuō)明該測(cè)量量表具有令人滿意的結(jié)構(gòu)效度則說(shuō)明該測(cè)量量表具有令人滿意的結(jié)構(gòu)效度 35各行借鑒 3、結(jié)構(gòu)效度、結(jié)構(gòu)效度-因子分析法舉例因子分析法舉例 對(duì)測(cè)量動(dòng)機(jī)的量表進(jìn)行了因子分析對(duì)測(cè)量動(dòng)機(jī)的量表進(jìn)行了因子分析 （參考（參考“媒介媒介人現(xiàn)代化人現(xiàn)代化”） 結(jié)果將受眾使用媒介動(dòng)機(jī)分成了三類

27、結(jié)果將受眾使用媒介動(dòng)機(jī)分成了三類 信息尋求動(dòng)機(jī)、娛樂(lè)消遣動(dòng)機(jī)、社會(huì)功利動(dòng)機(jī)信息尋求動(dòng)機(jī)、娛樂(lè)消遣動(dòng)機(jī)、社會(huì)功利動(dòng)機(jī) 與研究者設(shè)計(jì)量表時(shí)假設(shè)的結(jié)構(gòu)一致與研究者設(shè)計(jì)量表時(shí)假設(shè)的結(jié)構(gòu)一致 說(shuō)明這一動(dòng)機(jī)量表具有很好的結(jié)構(gòu)效度說(shuō)明這一動(dòng)機(jī)量表具有很好的結(jié)構(gòu)效度 36各行借鑒 表表 6 6- -8 8 廈門(mén)受眾的媒介使用動(dòng)機(jī)量表的因子分析結(jié)果廈門(mén)受眾的媒介使用動(dòng)機(jī)量表的因子分析結(jié)果 公共因子公共因子 媒介使用動(dòng)機(jī)量表中的題項(xiàng)媒介使用動(dòng)機(jī)量表中的題項(xiàng) 負(fù)荷量負(fù)荷量 有效有效 程度程度 累計(jì)有累計(jì)有 效程度效程度 增加新知識(shí)、新見(jiàn)聞增加新知識(shí)、新見(jiàn)聞 0.813870.81387 了解別人對(duì)各種事物的看法了解

28、別人對(duì)各種事物的看法 0.710110.71011 了解各地的事情了解各地的事情 0.682340.68234 因子一因子一 信息尋求動(dòng)機(jī)信息尋求動(dòng)機(jī) 了解方針政策了解方針政策 0.646710.64671 25.9%25.9% 25.9%25.9% 為了娛樂(lè)為了娛樂(lè) 0.749050.74905 為了消遣為了消遣 0.773680.77368 滿足好奇心滿足好奇心 0.564950.56495 和家人共享閱讀的樂(lè)趣和家人共享閱讀的樂(lè)趣 0.369280.36928 工作時(shí)可以得到調(diào)劑工作時(shí)可以得到調(diào)劑 0.572270.57227 因子二因子二 娛樂(lè)消遣動(dòng)機(jī)娛樂(lè)消遣動(dòng)機(jī) 增加談話資料增加談話

29、資料 0.518670.51867 16.0%16.0% 41.9%41.9% 尋求購(gòu)物參考尋求購(gòu)物參考 0.847010.84701 因子三因子三 社會(huì)功利動(dòng)機(jī)社會(huì)功利動(dòng)機(jī) 尋求解決工作、生活問(wèn)題的方法尋求解決工作、生活問(wèn)題的方法 0.795180.79518 11.7%11.7% 53.6%53.6% 37各行借鑒 3、結(jié)構(gòu)效度、結(jié)構(gòu)效度-項(xiàng)目分析法項(xiàng)目分析法 （難易度）（難易度） 量表中各個(gè)題項(xiàng)的量表中各個(gè)題項(xiàng)的“難易度難易度”和和“鑒別度鑒別度” 難易度難易度=(PH+PL)/2 PH和和PL分別表示高分組和低分組的通過(guò)率分別表示高分組和低分組的通過(guò)率 38各行借鑒 3、結(jié)構(gòu)效度、結(jié)構(gòu)

30、效度-項(xiàng)目分析法項(xiàng)目分析法 （難易度）（難易度） 通過(guò)率的計(jì)算方法：通過(guò)率的計(jì)算方法： 將反向題作逆向處理后，計(jì)算累加量表的總分將反向題作逆向處理后，計(jì)算累加量表的總分 總分按由小到大的順序排列，劃分成人數(shù)相等的四個(gè)組總分按由小到大的順序排列，劃分成人數(shù)相等的四個(gè)組 分?jǐn)?shù)最高和最低的兩個(gè)組分別為分?jǐn)?shù)最高和最低的兩個(gè)組分別為“高分組高分組”和和“低分組低分組” 計(jì)算這兩組的被訪者在每個(gè)題項(xiàng)上的計(jì)算這兩組的被訪者在每個(gè)題項(xiàng)上的“通過(guò)率通過(guò)率” PH和和 PL 正向題的通過(guò)率正向題的通過(guò)率=（“非常同意非常同意”+“比較同意比較同意”）的比例）的比例 逆向題的通過(guò)率逆向題的通過(guò)率=（“很不同意很不同

31、意”+“不太同意不太同意”）的比例）的比例 39各行借鑒 3、結(jié)構(gòu)效度、結(jié)構(gòu)效度-項(xiàng)目分析法項(xiàng)目分析法 （難易度）（難易度） 通過(guò)率的意義通過(guò)率的意義 對(duì)于正向題，表示持肯定、積極態(tài)度的比例對(duì)于正向題，表示持肯定、積極態(tài)度的比例 對(duì)于反向題，表示持否定、消極態(tài)度的比例對(duì)于反向題，表示持否定、消極態(tài)度的比例 某題項(xiàng)的難易度某題項(xiàng)的難易度=高分組和低分組通過(guò)率的均值高分組和低分組通過(guò)率的均值 難易度越大，表示該題項(xiàng)越難易度越大，表示該題項(xiàng)越“容易通過(guò)容易通過(guò)” 態(tài)度量表取難易度適中態(tài)度量表取難易度適中(0.5左右左右)的情況較多的情況較多 40各行借鑒 3、結(jié)構(gòu)效度、結(jié)構(gòu)效度-項(xiàng)目分析法項(xiàng)目分析法

32、 （鑒別度）（鑒別度） 量表中各個(gè)題項(xiàng)對(duì)所測(cè)特性的區(qū)分能力量表中各個(gè)題項(xiàng)對(duì)所測(cè)特性的區(qū)分能力 鑒別度鑒別度= PH-PL 41各行借鑒 3、結(jié)構(gòu)效度、結(jié)構(gòu)效度-項(xiàng)目分析法項(xiàng)目分析法 （鑒別度）（鑒別度） 鑒別度的意義鑒別度的意義 某題項(xiàng)的鑒別度越大某題項(xiàng)的鑒別度越大 “高分組高分組”和和“低分組低分組”對(duì)某個(gè)題項(xiàng)反應(yīng)的差異越大對(duì)某個(gè)題項(xiàng)反應(yīng)的差異越大 持肯定、積極（否定、消極）態(tài)度的比例之差越大持肯定、積極（否定、消極）態(tài)度的比例之差越大 量表中各個(gè)題項(xiàng)的鑒別度高一些為好量表中各個(gè)題項(xiàng)的鑒別度高一些為好 考試題最好能將成績(jī)好的和差的學(xué)生區(qū)分出來(lái)考試題最好能將成績(jī)好的和差的學(xué)生區(qū)分出來(lái) 使成績(jī)好

33、的學(xué)生大多數(shù)都能通過(guò)使成績(jī)好的學(xué)生大多數(shù)都能通過(guò) 而成績(jī)差的學(xué)生卻很少能通過(guò)而成績(jī)差的學(xué)生卻很少能通過(guò) 42各行借鑒 例例 對(duì)亞運(yùn)會(huì)態(tài)度量表的單項(xiàng)與總和相關(guān)效度分析（對(duì)亞運(yùn)會(huì)態(tài)度量表的單項(xiàng)與總和相關(guān)效度分析（n=1,220, *表示表示 p0.001） ） 對(duì)亞運(yùn)會(huì)的態(tài)度量表對(duì)亞運(yùn)會(huì)的態(tài)度量表 平均值平均值 標(biāo)準(zhǔn)標(biāo)準(zhǔn) 差差 與積極態(tài)與積極態(tài) 度方向度方向 相關(guān)相關(guān) 系數(shù)系數(shù) 顯著顯著 程度程度 1、亞運(yùn)會(huì)將顯著提高中國(guó)的國(guó)際聲望，樹(shù)立良 、亞運(yùn)會(huì)將顯著提高中國(guó)的國(guó)際聲望，樹(shù)立良 好的國(guó)際形象好的國(guó)際形象 4.35 0.70 相同相同 0.65 * 2、作為中國(guó)公民，為亞運(yùn)會(huì)在中國(guó)召開(kāi)自豪 、作

34、為中國(guó)公民，為亞運(yùn)會(huì)在中國(guó)召開(kāi)自豪 4.45 0.72 相同相同 0.65 * 3、在國(guó)家財(cái)政困難的情況下不該舉辦亞運(yùn)會(huì) 、在國(guó)家財(cái)政困難的情況下不該舉辦亞運(yùn)會(huì) 2.47 0.99 相反相反 -0.54 * 4、只要能開(kāi)好亞運(yùn)會(huì)，即使影響我的生活、工 、只要能開(kāi)好亞運(yùn)會(huì)，即使影響我的生活、工 作秩序也沒(méi)關(guān)作秩序也沒(méi)關(guān)系系 3.37 1.11 相同相同 0.46 * 5、亞運(yùn)會(huì)有利振奮民族精神，激發(fā)愛(ài)國(guó)主義 、亞運(yùn)會(huì)有利振奮民族精神，激發(fā)愛(ài)國(guó)主義 4.31 0.74 相同相同 0.63 * 6、亞運(yùn)會(huì)召開(kāi)能為我國(guó)帶來(lái)可觀的經(jīng)濟(jì)效益 、亞運(yùn)會(huì)召開(kāi)能為我國(guó)帶來(lái)可觀的經(jīng)濟(jì)效益 3.16 0.94 相同

35、相同 0.50 * 7、花這么多錢辦亞運(yùn)會(huì)，不如把錢用于改善生 、花這么多錢辦亞運(yùn)會(huì)，不如把錢用于改善生 活活 2.42 0.97 相反相反 -0.67 * 8、舉辦亞運(yùn)會(huì)，充分顯示了社會(huì)主義優(yōu)越性 、舉辦亞運(yùn)會(huì)，充分顯示了社會(huì)主義優(yōu)越性 3.82 0.92 相同相同 0.62 * 9、亞運(yùn)會(huì)的宣傳聲勢(shì)雖大，但有些鋪張浪費(fèi) 、亞運(yùn)會(huì)的宣傳聲勢(shì)雖大，但有些鋪張浪費(fèi) 2.89 0.99 相反相反 -0.58 * 10、 、我對(duì)亞運(yùn)會(huì)后經(jīng)濟(jì)形勢(shì)的發(fā)展感到憂慮我對(duì)亞運(yùn)會(huì)后經(jīng)濟(jì)形勢(shì)的發(fā)展感到憂慮 2.80 0.94 相反相反 -0.61 * 11、亞運(yùn)會(huì)向老百姓集資，增加了人民負(fù)擔(dān) 、亞運(yùn)會(huì)向老百姓集資

36、，增加了人民負(fù)擔(dān) 2.50 0.99 相反相反 -0.67 * 12、展現(xiàn)我國(guó)安定團(tuán)結(jié)和改革開(kāi)放重大成就 、展現(xiàn)我國(guó)安定團(tuán)結(jié)和改革開(kāi)放重大成就 4.07 0.84 相同相同 0.67 * 43各行借鑒 例例 對(duì)對(duì)亞亞運(yùn)運(yùn)會(huì)會(huì)態(tài)態(tài)度度量量表表的的項(xiàng)項(xiàng)目目分分析析（n=1,220） 對(duì)對(duì)亞亞運(yùn)運(yùn)會(huì)會(huì)的的態(tài)態(tài)度度量量表表 高高分分組組 PH 低低分分組組 PL 難難易易 度度 鑒鑒別別 度度 評(píng)評(píng)價(jià)價(jià) 1、 、亞亞運(yùn)運(yùn)會(huì)會(huì)將將顯顯著著提提高高中中國(guó)國(guó)的的國(guó)國(guó)際際聲聲望望， 樹(shù)樹(shù)立立良良好好的的國(guó)國(guó)際際形形象象 302 208 .84 .31 偏偏容容易易 鑒鑒別別度度偏偏低低 2、 、作作為為中中國(guó)國(guó)公公民民，我我為為亞亞運(yùn)運(yùn)會(huì)會(huì)在在中中國(guó)國(guó)召召 開(kāi)開(kāi)感感到到自自豪豪 305 213 .85 .30 偏偏容容易易 鑒鑒別別度度偏偏低低 3、 、財(cái)財(cái)政政困困難難的的情情況況下下不不該該舉舉辦辦 261 62 .53 .65 4、 、影影響響我我的的生生活活、工工作作秩秩序序也也沒(méi)沒(méi)關(guān)關(guān)系系 248 77 .53 .56 5、 、有有利利振振奮奮民民族族精精神神，激激發(fā)發(fā)愛(ài)愛(ài)國(guó)國(guó)主主義義 303 202 .83 .33 偏偏