第五講 心理學(xué)研究的信度和效度.doc

第五講 心理學(xué)研究的信、效度長江大學(xué)教育科學(xué)系 嚴(yán)磊研究設(shè)計(jì)的主要目標(biāo)是特高整個(gè)研究的科學(xué)性水平，即保證研究結(jié)果、結(jié)論能真實(shí)的反映人的心理活動規(guī)律和教育規(guī)律。信度與效度不但是研究設(shè)計(jì)應(yīng)當(dāng)遵循的標(biāo)準(zhǔn)，而且也是評價(jià)研究設(shè)計(jì)質(zhì)量乃至整個(gè)研究結(jié)果科學(xué)水平。信度、效度源于心理與教育測驗(yàn)領(lǐng)域，現(xiàn)在心理學(xué)者將誒用了測量領(lǐng)域的信度與效度概念，并把研究的信度和效度作為設(shè)計(jì)與評價(jià)各種研究的標(biāo)準(zhǔn)，以提高心理與教育科學(xué)中各類研究的客觀性、可靠性和科學(xué)性。如今，有關(guān)研究信度和效度的理論和方法已經(jīng)為心理、教育研究者普遍接受，成為研究和實(shí)驗(yàn)設(shè)計(jì)的關(guān)鍵，也成為心理、教育研究方法發(fā)展的里程碑。一 心理測量的信度和效度 射擊打靶1. 真分?jǐn)?shù)假設(shè)假設(shè)一：在所討論的問題范圍內(nèi)，真分?jǐn)?shù)不變，亦即個(gè)體具有恒定的特質(zhì)，其分量一定，取值是常數(shù)。假設(shè)二：誤差是完全隨機(jī)的。這里有二層意思，一是測量誤差是平均數(shù)（期望值）為零的正態(tài)隨機(jī)變量；二是測量誤差跟被測心理特質(zhì)即真分?jǐn)?shù)間相互獨(dú)立。假設(shè)三：觀察分?jǐn)?shù)是真分?jǐn)?shù)與誤差分?jǐn)?shù)的和。2. 測量的信度信度（reliability）是指測量結(jié)果的穩(wěn)定性和可靠性程度。重測信度、復(fù)本信度、分半信度、評分者一致性信度3.測量的效度一 研究的信度二 研究的信度1.研究信度的概念研究的信度指研究所的事實(shí)、數(shù)據(jù)的一致性和穩(wěn)定性程度。一向好的心理與教育研究，其結(jié)果必須穩(wěn)定可靠，即重復(fù)研究的結(jié)果要保持穩(wěn)定、一致，否則便可不信。根據(jù)影響信度的誤差來源，信度可分為兩大類：穩(wěn)定性和同質(zhì)性。穩(wěn)定性指研究結(jié)果跨時(shí)間、跨情境的一致性。同質(zhì)性指研究工具本身各項(xiàng)目內(nèi)容的一致性。舉例：用同一思維研究工具在前后相隔較短的時(shí)間內(nèi)測查某一年級的兒童兩次，結(jié)果發(fā)現(xiàn)兩次測查結(jié)果不一致，第一次測查結(jié)果表明被試未達(dá)到邏輯思維水平，第二次結(jié)果發(fā)現(xiàn)他們已經(jīng)達(dá)到邏輯思維水平。2.判定研究信度的方法重復(fù)法運(yùn)用重復(fù)測量、重復(fù)研究的方法，在相同條件下用相同方法進(jìn)行兩次以上的研究，然后考察它們是否取得相同結(jié)果。重測信度相似法通過比較同質(zhì)或類似研究工作、或同類研究的結(jié)果的一致性程度，來判斷研究工具或研究結(jié)果的可靠性。復(fù)本信度獨(dú)立評判法即兩個(gè)或兩個(gè)以上的研究者同時(shí)對一組被試的行為、操作水平等各種表現(xiàn)進(jìn)行獨(dú)立判斷或評價(jià)，然后比較它們之間的一致性，此法可以判定研究者之間一致性的程度。評分者一致信度舉例：相似法：將某一特定研究的結(jié)果與國內(nèi)外同類研究的結(jié)果進(jìn)行比較，是判定研究的信度的常用方法。新編智力量表與韋克斯勒智力量表的比較。獨(dú)立評定法：采用觀察法、問卷法、訪談法、測驗(yàn)法、實(shí)驗(yàn)法等方法進(jìn)行的研究中，日益注重觀察者、評定者和計(jì)分者之間的信度。攻擊性行為，助人行為。二 研究的效度研究中的自變量與因變量之間的關(guān)系屬于內(nèi)部效度問題。在變量之間判定因果關(guān)系，這是統(tǒng)計(jì)結(jié)論效度的問題。因果關(guān)系的構(gòu)思性質(zhì)，涉及到研究的構(gòu)思效度。變量之間關(guān)系的普遍意義，則是研究的外部效度問題?？梢娧芯啃Ф仍谘芯康脑O(shè)計(jì)、實(shí)施與評價(jià)等活動中的關(guān)鍵意義。（1）所研究的兩個(gè)或多個(gè)變量之間是否存在一定的關(guān)系？尤其是，研究的自變量與因變量之間是否有關(guān)系？（2）如果所研究的變量之間存在一定關(guān)系，這種關(guān)系是否因果關(guān)系？（3）如果變量之間可能存在因果關(guān)系，它所包含的具體的因果關(guān)系構(gòu)思是什么？（4）如果變量之間的因果關(guān)系構(gòu)思明確，這種因果關(guān)系對于其他的成員、背景條件和時(shí)間的普遍意義如何？以上四類問題相互關(guān)聯(lián)，都涉及到研究的有效性，即研究的效度。1957年，社會心理學(xué)家坎貝爾，第一次明確的提出研究的效度問題。研究的自變量與因變量之間的關(guān)系屬于內(nèi)部效度的問題；在變量之間判斷因果關(guān)系，這是統(tǒng)計(jì)結(jié)論效度的問題；因果關(guān)系的構(gòu)思性質(zhì)，涉及到研究的構(gòu)思效度；變量之間關(guān)系的普遍意義，則是研究的外部效度問題。在一項(xiàng)心理學(xué)研究中，一般都設(shè)計(jì)研究的理論構(gòu)思、設(shè)計(jì)、實(shí)施和統(tǒng)計(jì)推論環(huán)節(jié)。1. 構(gòu)思效度 皮亞杰認(rèn)知發(fā)展理論（1） 構(gòu)思效度的定義和條件：研究的構(gòu)思效度涉及到研究方案和測量指標(biāo)的理論構(gòu)思及其操作化的問題，即理論構(gòu)思及其轉(zhuǎn)換的有效性。為了使研究具有較高的構(gòu)思效度：步驟舉例要求研究的理論構(gòu)思結(jié)構(gòu)嚴(yán)謹(jǐn)、層次分明，形成某種構(gòu)思網(wǎng)絡(luò)，并對研究中的自變量和因變量作出嚴(yán)格的定義（抽象定義）。研究自我意識發(fā)展，理論上將自我意識分為自我認(rèn)識、自我體驗(yàn)和自我控制三方面，然后再將自我認(rèn)識區(qū)分為對生理自我的認(rèn)識、對心理我自我的認(rèn)識和自我控制三方面。針對研究構(gòu)思的特點(diǎn)，給予明確的操作定義，并確定相應(yīng)的測量指標(biāo)。研究“發(fā)散思維”和“集中思維”的關(guān)系，首先要明確這兩個(gè)概念、變量的內(nèi)涵。給變量下明確的操作定義，并指定相應(yīng)的、客觀的測量指標(biāo)。消除或控制影響構(gòu)思效度的其他因素。首先，其次，（2）影響構(gòu)思效度的因素A 對于研究構(gòu)思的解釋。B 單一操作的偏向：心理特征具有系統(tǒng)與層次的特點(diǎn)，因此，心理學(xué)研究的構(gòu)思一般都具有多維性，當(dāng)研究中只用一種尺度和樣本來表示這種多為復(fù)雜構(gòu)思時(shí)，就會產(chǎn)生-。C 單一方法的偏向。理論構(gòu)思的多維性，要求一種復(fù)合的測量。比如分別用訪談法、問題卷法和觀察法研究群體心理結(jié)構(gòu)，就容易取得比較理想的結(jié)果。D 實(shí)驗(yàn)者期望和被試猜測。E 構(gòu)思水平之間的混淆。F 不同實(shí)驗(yàn)處理的交互作用。2. 內(nèi)部效度 氣溫與犯罪率的關(guān)系（1） 內(nèi)部效度：效度常常是指一項(xiàng)測驗(yàn)測到所要測量的東西或達(dá)到某種目的的程度，也有人叫作真實(shí)性。研究的內(nèi)部效度是指在研究的自變量和因變量之間存在關(guān)系的明確程度。研究中的自變量與因變量之間是否真正存在關(guān)系？因變量的變化是否一定是否自變量的變化引起的？（2）內(nèi)部效度的條件：首先是由于正確的選擇了研究的自變量和因變量；內(nèi)部效度的另一個(gè)重要條件是周密的實(shí)驗(yàn)和研究設(shè)計(jì)。（3）影響內(nèi)部效度的因素：A 歷史因素，包括前攝歷史因素（被試固有或習(xí)得的差異，如性別、態(tài)度、個(gè)性）和后攝歷史因素（研究測量之外可能影響自變量和因變量之間差異的因素）。舉例：檢驗(yàn)?zāi)稠?xiàng)工作豐富化方案對于提高職工積極性的作用研究。在方案試行期間，一部分職工增加了工資，因此混淆了工作豐富化方案對于工作積極性的影響。B 選擇因素。 C 未隨機(jī)取樣和隨機(jī)分配。 D 成熟因素。E研究被試的更換和淘汰。 F測量和測試手段。 G 統(tǒng)計(jì)回歸效應(yīng)。H實(shí)驗(yàn)處理和程序。 I多種研究條件和因素的交互作用。上述8種主要因素，都是在研究中應(yīng)特別注意控制的，最有效的途徑是采用隨機(jī)化程序。在心理學(xué)研究中具有較高內(nèi)部效度的設(shè)計(jì)之一，是著名的“所羅門四組設(shè)計(jì)”。3.外部效度（1）外部效度：是指實(shí)驗(yàn)和研究的結(jié)果能夠一般化和普遍化到其他的總體、變量條件、時(shí)間和背景中去的程度，即研究結(jié)果和實(shí)驗(yàn)效果的普遍性和可應(yīng)用性。一般認(rèn)為，內(nèi)部效度是外部效度的必要條件，但不是充分條件?？傮w效度：指研究結(jié)果能夠使用于被時(shí)所來自的總體的程度和能力。生態(tài)效度：指研究結(jié)果能夠概括化和適用于其他研究條件和情境的程度能力。（2）外部效度的條件：外部效度的要求是使研究能夠代表真實(shí)世界的情況。這種多重實(shí)驗(yàn)手段，是獲得外部效度、提高研究結(jié)果可應(yīng)用性的重要條件。（3）影響外部效度的因素：A總體效度，這是指研究結(jié)果對于研究者最終感興趣的總體的普遍意義。B 自變量和因變量的定義和測試方式。C對測量的敏感化。D 多重實(shí)驗(yàn)的干擾E 特異性效應(yīng)。F 試驗(yàn)者效應(yīng)。G 研究與實(shí)際情景的相似性。H 被試選擇和實(shí)驗(yàn)處理的交互作用。4.統(tǒng)計(jì)結(jié)論效度（1）統(tǒng)計(jì)結(jié)論效度的定義和條件：統(tǒng)計(jì)結(jié)論效度是有關(guān)決定實(shí)驗(yàn)處理效應(yīng)的數(shù)據(jù)分析程序的效度檢驗(yàn)，它并不涉及系統(tǒng)性偏向的來源的問題，而是研究差誤變異源和如何適當(dāng)運(yùn)用統(tǒng)計(jì)顯著性檢驗(yàn)的問題。研究的統(tǒng)計(jì)結(jié)論效度取決于兩個(gè)方面的條件：一是數(shù)據(jù)的質(zhì)量，數(shù)據(jù)分析程度的效度是以數(shù)據(jù)的質(zhì)量作為基礎(chǔ)的。二是統(tǒng)計(jì)檢驗(yàn)的假設(shè)，數(shù)據(jù)分析中所采用的各種統(tǒng)計(jì)方法，都有其明確的統(tǒng)計(jì)檢驗(yàn)假設(shè)。舉例：當(dāng)研究樣本較小時(shí)，由于樣本成分與測量的波動性較大，具有不穩(wěn)定性，此時(shí)若依賴于統(tǒng)計(jì)顯著性水平做結(jié)論是不可靠的。在這種情況下，就應(yīng)該運(yùn)用功效分析，看看一定的樣本大小、變異程度和水平上能夠檢驗(yàn)出多大的效應(yīng)。大學(xué)新生SCL-90中三因子分析討論，27742,1200，性別比率對統(tǒng)計(jì)結(jié)果的影響。（2） 影響統(tǒng)計(jì)結(jié)論效度的因素: A 統(tǒng)計(jì)功效低。B 違反統(tǒng)計(jì)檢驗(yàn)的假設(shè)。C 測量信度低。D 實(shí)驗(yàn)處理實(shí)施的可靠性。E 研究背景中隨機(jī)的無關(guān)因素。F 被試的隨機(jī)異質(zhì)性。四種研究效度之間的關(guān)研究的內(nèi)部效度、外部效度、統(tǒng)計(jì)結(jié)論效度和構(gòu)思效度，是相互聯(lián)系和相互影響的。統(tǒng)計(jì)結(jié)論效度實(shí)際上是內(nèi)部效度的特例，它們都涉及研究本身的因果關(guān)系和統(tǒng)計(jì)檢驗(yàn)的可靠性。構(gòu)思效度則與外