教育科學(xué)定量研究的幾個(gè)問(wèn)題

1、教育科學(xué)定量研究的幾個(gè)問(wèn)題辛辛 濤濤教育部基礎(chǔ)教育質(zhì)量監(jiān)測(cè)中心教育部基礎(chǔ)教育質(zhì)量監(jiān)測(cè)中心提綱一：我國(guó)教育科學(xué)研究要強(qiáng)調(diào)定量研究一：我國(guó)教育科學(xué)研究要強(qiáng)調(diào)定量研究二：可操作、可重復(fù)是其基本特征二：可操作、可重復(fù)是其基本特征三：程序性是定量研究的一般要求三：程序性是定量研究的一般要求四：探尋因果關(guān)系是定量研究的核心追求四：探尋因果關(guān)系是定量研究的核心追求五：教育科學(xué)研究可以獲得變量間的因果關(guān)系嗎五：教育科學(xué)研究可以獲得變量間的因果關(guān)系嗎23一、我國(guó)教育科學(xué)研究要強(qiáng)調(diào)定量研究一、我國(guó)教育科學(xué)研究要強(qiáng)調(diào)定量研究教育科學(xué)的兩大研究范式教育科學(xué)的兩大研究范式 “自然主義范式自然主義范式”（定性研究）（定性

2、研究）從人文學(xué)科推衍出來(lái)，關(guān)注整體和定性的從人文學(xué)科推衍出來(lái)，關(guān)注整體和定性的信息以及理解的方法信息以及理解的方法 “實(shí)證主義范式實(shí)證主義范式”（定量研究）（定量研究）模仿自然科學(xué)，強(qiáng)調(diào)適合用數(shù)學(xué)工具來(lái)分模仿自然科學(xué)，強(qiáng)調(diào)適合用數(shù)學(xué)工具來(lái)分析的、經(jīng)驗(yàn)的、量化的觀察；研究的任務(wù)在析的、經(jīng)驗(yàn)的、量化的觀察；研究的任務(wù)在于確立因果關(guān)系，作出解釋于確立因果關(guān)系，作出解釋量化研究與質(zhì)性研究量化研究與質(zhì)性研究比較比較量化研究量化研究質(zhì)性研究質(zhì)性研究哲學(xué)基礎(chǔ)研究范式邏輯過(guò)程理論模式主要目標(biāo)分析方法主要方式資料收集技術(shù)研究特征研究對(duì)象研究報(bào)告 實(shí)證主義科學(xué)范式演繹推理理論檢驗(yàn)相關(guān)關(guān)系因果聯(lián)系統(tǒng)計(jì)分析實(shí)驗(yàn)、調(diào)查

3、量表問(wèn)卷結(jié)構(gòu)觀察客觀個(gè)人或代表人群樣本客觀公正 人文主義自然范式歸納推理理論建構(gòu)深入理解社會(huì)現(xiàn)象文字描述實(shí)地研究參與觀察、深度訪談主觀個(gè)案詮釋性報(bào)告反映建構(gòu) 我國(guó)教育科學(xué)研究的傳統(tǒng)我國(guó)教育科學(xué)研究的傳統(tǒng) 我國(guó)教育研究有很長(zhǎng)的質(zhì)性研究的歷史我國(guó)教育研究有很長(zhǎng)的質(zhì)性研究的歷史 量化研究一直沒有成為研究的主流量化研究一直沒有成為研究的主流 請(qǐng)牢記請(qǐng)牢記: :沒有數(shù)據(jù)的支撐，你只是一個(gè)持有觀點(diǎn)的普通人沒有數(shù)據(jù)的支撐，你只是一個(gè)持有觀點(diǎn)的普通人7二、可操作、可重復(fù)是定量研究基本特征二、可操作、可重復(fù)是定量研究基本特征 客觀的實(shí)證性的證據(jù)客觀的實(shí)證性的證據(jù): Show me: Show me 可重復(fù)性可重

4、復(fù)性: Let me see for myself“: Let me see for myself“ 容許質(zhì)疑：很多觀念會(huì)被拒絕容許質(zhì)疑：很多觀念會(huì)被拒絕 科學(xué)的假設(shè)科學(xué)的假設(shè) 操作性原則操作性原則 決定性原則決定性原則 不變性原則不變性原則目前教育科學(xué)研究的一些問(wèn)題目前教育科學(xué)研究的一些問(wèn)題 需要解決的問(wèn)題不明確。如：需要解決的問(wèn)題不明確。如： 實(shí)施開放式教學(xué)，培養(yǎng)創(chuàng)新精神的研究實(shí)施開放式教學(xué)，培養(yǎng)創(chuàng)新精神的研究 高中物理教學(xué)中增加實(shí)踐環(huán)節(jié)，培養(yǎng)創(chuàng)新能力高中物理教學(xué)中增加實(shí)踐環(huán)節(jié)，培養(yǎng)創(chuàng)新能力的研究的研究 指導(dǎo)學(xué)生學(xué)習(xí)方略，優(yōu)化學(xué)生學(xué)習(xí)行為的研究指導(dǎo)學(xué)生學(xué)習(xí)方略，優(yōu)化學(xué)生學(xué)習(xí)行為的研究和實(shí)驗(yàn)

5、和實(shí)驗(yàn)?zāi)壳敖逃茖W(xué)研究的一些問(wèn)題目前教育科學(xué)研究的一些問(wèn)題 課題名稱外延太大，研究對(duì)象不清楚。如：課題名稱外延太大，研究對(duì)象不清楚。如： 幼兒創(chuàng)新教育研究幼兒創(chuàng)新教育研究 關(guān)于素質(zhì)教育的評(píng)價(jià)體系的研究關(guān)于素質(zhì)教育的評(píng)價(jià)體系的研究 教學(xué)心理學(xué)應(yīng)用研究教學(xué)心理學(xué)應(yīng)用研究 教學(xué)方法的研究教學(xué)方法的研究 研究范圍不清。如：研究范圍不清。如： 校本課程建設(shè)研究校本課程建設(shè)研究 學(xué)科教學(xué)中滲透環(huán)境教育的研究學(xué)科教學(xué)中滲透環(huán)境教育的研究操作化是定量研究的前提操作化是定量研究的前提 操作化是量化研究的基本要求，體現(xiàn)在眾多方面：操作化是量化研究的基本要求，體現(xiàn)在眾多方面： 課題的選擇與命名課題的選擇與命名 研究

6、假設(shè)的提出研究假設(shè)的提出 變量的操作化定義等變量的操作化定義等 布里奇曼指出：一個(gè)概念或變量不應(yīng)以屬性來(lái)定義布里奇曼指出：一個(gè)概念或變量不應(yīng)以屬性來(lái)定義，而應(yīng)以實(shí)際的操作來(lái)確定，采用測(cè)量它的操作方，而應(yīng)以實(shí)際的操作來(lái)確定，采用測(cè)量它的操作方法來(lái)界定。法來(lái)界定。觀察、概念、構(gòu)念、定義觀察、概念、構(gòu)念、定義圖 購(gòu)買和蒐集資料的關(guān)係研究概念圖觀察概念構(gòu)念真實(shí)(reality)和事實(shí)(facts) 購(gòu) 買 蒐集情報(bào) 滿 意 度 品牌認(rèn)知(comprehension) 態(tài) 度 (attitude) 假定的關(guān)係操作性定義 操作性定義抽象化抽象化低低高高資料來(lái)源：Davis & Cosenza (1

7、993), “ Business Research for Decision Making”, 3rd edition, p.26觀察、概念、構(gòu)念、定義觀察、概念、構(gòu)念、定義表 2-1 概念及構(gòu)念的組成定義及操作性定義說(shuō)明定義組成定義操作性定義概念購(gòu) 買藉由付錢或付出其他等值物品去取得物品或服務(wù)的一種行動(dòng)名冊(cè)上在過(guò)去一年中有購(gòu)買FORD汽車且已付款者搜尋情報(bào)為了決策目的而蓄意的搜尋資訊藉由五個(gè)項(xiàng)目，以李克特五點(diǎn)量表來(lái)評(píng)分構(gòu)念滿 意 度產(chǎn)品效益能滿足預(yù)期效益的程度事前預(yù)期效益和試後效益評(píng)價(jià)的差異品牌認(rèn)知一個(gè)特定產(chǎn)品的特質(zhì)能被了解的程度對(duì)特定產(chǎn)品的屬性記得起來(lái)的比率態(tài)度一種後天學(xué)習(xí)的偏好 (Iea

8、rned predisposition)，並持久性維持此種偏好 就由八個(gè)項(xiàng)目，以七點(diǎn)的必伯拉 (Bipolar) 量表來(lái)評(píng)分資料來(lái)源：Davis & Cosenza (1993), “ Business Research for Decision Making”, 3rd edition, p.2714三、程序性是定量研究基本要求三、程序性是定量研究基本要求教育與心理學(xué)定量研究流程圖撰寫研究成果理論基礎(chǔ)或研究目的量表研究實(shí)驗(yàn)研究選用通用量表發(fā)展或修訂新量表預(yù)測(cè)項(xiàng)目分析效度分析信度分析正式量表正式測(cè)試數(shù)據(jù)統(tǒng)計(jì)分析量表的質(zhì)量分析量表編制技術(shù)實(shí)驗(yàn)設(shè)計(jì)技術(shù)推斷統(tǒng)計(jì)分析多元統(tǒng)計(jì)分析描述統(tǒng)計(jì)分析非

9、參數(shù)檢驗(yàn)(可驗(yàn)證的假設(shè))16四、因果規(guī)律是定量研究核心目標(biāo)四、因果規(guī)律是定量研究核心目標(biāo)科學(xué)科學(xué)研究研究的目的的目的控制(control)報(bào)導(dǎo) (reporting)敘述 (description)預(yù)測(cè) (prediction)解釋 (explanation)圖 科學(xué)的努力程度最高最高 (highest)理解的程度理解的程度(degree of understanding)最低最低 (lowest)對(duì)因果關(guān)系的理解對(duì)因果關(guān)系的理解 什么是因果關(guān)系。什么是因果關(guān)系。 LockeLocke（16901690）指出）指出“A cause is that which makes A cause is

10、that which makes any other thing, either simple idea, substance, any other thing, either simple idea, substance, or mode, begin to be; and the effect is that or mode, begin to be; and the effect is that which had its beginning from other thingwhich had its beginning from other thing”（原（原因就是可以使一些其他的事

11、情、想法、物質(zhì)、或樣式因就是可以使一些其他的事情、想法、物質(zhì)、或樣式開始出現(xiàn)，而結(jié)果就是它從其他事情中獲得一個(gè)開始）開始出現(xiàn)，而結(jié)果就是它從其他事情中獲得一個(gè)開始） 對(duì)因果關(guān)系的理解對(duì)因果關(guān)系的理解 對(duì)因果關(guān)系的認(rèn)識(shí)是反復(fù)和無(wú)限發(fā)展的對(duì)因果關(guān)系的認(rèn)識(shí)是反復(fù)和無(wú)限發(fā)展的過(guò)程。過(guò)程。 人類對(duì)對(duì)因果關(guān)系的認(rèn)識(shí)也是人類對(duì)對(duì)因果關(guān)系的認(rèn)識(shí)也是 “ “實(shí)踐、認(rèn)實(shí)踐、認(rèn)識(shí)、再實(shí)踐、再認(rèn)識(shí)，循環(huán)往復(fù)以至無(wú)窮識(shí)、再實(shí)踐、再認(rèn)識(shí)，循環(huán)往復(fù)以至無(wú)窮”的過(guò)程。的過(guò)程。 因果關(guān)系中的識(shí)別問(wèn)題：我們只能研究原因因果關(guān)系中的識(shí)別問(wèn)題：我們只能研究原因的結(jié)果，而不是結(jié)果的原因。的結(jié)果，而不是結(jié)果的原因。對(duì)因果關(guān)系的理解對(duì)因果

12、關(guān)系的理解 自然科學(xué)中的因果關(guān)系通常是決定性的；自然科學(xué)中的因果關(guān)系通常是決定性的； 社會(huì)科學(xué)中因果關(guān)系是概率的。社會(huì)科學(xué)中因果關(guān)系是概率的。 一個(gè)原因不可能完全的被決定，研究者只是尋一個(gè)原因不可能完全的被決定，研究者只是尋求結(jié)果出現(xiàn)的概率，所做分析并不是測(cè)量因果求結(jié)果出現(xiàn)的概率，所做分析并不是測(cè)量因果關(guān)系，而是原因?qū)е陆Y(jié)果出現(xiàn)的概率。關(guān)系，而是原因?qū)е陆Y(jié)果出現(xiàn)的概率。對(duì)因果關(guān)系的理解對(duì)因果關(guān)系的理解 進(jìn)行因果推論的標(biāo)準(zhǔn)。進(jìn)行因果推論的標(biāo)準(zhǔn)。因果的相對(duì)性因果的相對(duì)性因果的操縱性因果的操縱性因果的時(shí)間性因果的時(shí)間性消除潛在的影響消除潛在的影響因果關(guān)系的本質(zhì)因果關(guān)系的本質(zhì) 例子：例子： 我國(guó)現(xiàn)在有

13、不少私立學(xué)校，這些學(xué)校一般都有一流我國(guó)現(xiàn)在有不少私立學(xué)校，這些學(xué)校一般都有一流的硬件設(shè)施和相對(duì)較好的師資，那么是否私立學(xué)校的硬件設(shè)施和相對(duì)較好的師資，那么是否私立學(xué)校學(xué)生成績(jī)比公立學(xué)校好？學(xué)生成績(jī)比公立學(xué)校好？ 有人提出，教育是最好的投資，因?yàn)樯洗髮W(xué)的人的有人提出，教育是最好的投資，因?yàn)樯洗髮W(xué)的人的收入顯著高于沒上大學(xué)的人的收入。這個(gè)命題是不收入顯著高于沒上大學(xué)的人的收入。這個(gè)命題是不是有問(wèn)題？是有問(wèn)題？因果關(guān)系的本質(zhì) 因果關(guān)系本質(zhì)上是一個(gè)反事實(shí)的問(wèn)題。因果關(guān)系本質(zhì)上是一個(gè)反事實(shí)的問(wèn)題。 總的期望規(guī)則（總的期望規(guī)則（total expectation rule）：）： E ( Yt - Yc

14、) = E ( Y1t - Y1c ) ( 1 q ) + E ( Y0t - Y0c ) q 分解為兩個(gè)部分：分解為兩個(gè)部分： 上了大學(xué)的人和他們?nèi)绻簧洗髮W(xué)比：上了大學(xué)的人和他們?nèi)绻簧洗髮W(xué)比： E ( Y1t - Y1c ) ( 1 q ) 沒上大學(xué)的人和他們?nèi)绻狭舜髮W(xué)比：沒上大學(xué)的人和他們?nèi)绻狭舜髮W(xué)比： E ( Y0t - Y0c ) q 因果關(guān)系的本質(zhì)因果關(guān)系的本質(zhì) 因果關(guān)系本質(zhì)上是一個(gè)反事實(shí)的問(wèn)題。因果關(guān)系本質(zhì)上是一個(gè)反事實(shí)的問(wèn)題。 如果要知道上大學(xué)的人和不上大學(xué)的收入的平均差如果要知道上大學(xué)的人和不上大學(xué)的收入的平均差異是多少，至少需要四個(gè)部分的數(shù)據(jù)：異是多少，至少需要四個(gè)部

15、分的數(shù)據(jù)： ：確實(shí)上大學(xué)確實(shí)沒上大學(xué)可能上大學(xué)不大可能上大學(xué)因果關(guān)系的本質(zhì)因果關(guān)系的本質(zhì) 因果關(guān)系本質(zhì)上是一個(gè)反事實(shí)的問(wèn)題。因果關(guān)系本質(zhì)上是一個(gè)反事實(shí)的問(wèn)題。 但只能觀察到兩個(gè)部分的數(shù)據(jù)：但只能觀察到兩個(gè)部分的數(shù)據(jù)：確實(shí)上大學(xué)確實(shí)沒上大學(xué)可能上大學(xué)不大可能上大學(xué)因果關(guān)系的本質(zhì)因果關(guān)系的本質(zhì) 因果關(guān)系本質(zhì)上是一個(gè)反事實(shí)的問(wèn)題。因果關(guān)系本質(zhì)上是一個(gè)反事實(shí)的問(wèn)題。 要完成分析，就必須引進(jìn)假設(shè)：要完成分析，就必須引進(jìn)假設(shè)： “可能上大學(xué)的人如果確實(shí)沒上大學(xué)可能上大學(xué)的人如果確實(shí)沒上大學(xué)”的收入水平和的收入水平和“不不大可能上大學(xué)也確實(shí)沒上大學(xué)的人大可能上大學(xué)也確實(shí)沒上大學(xué)的人”的收入水平是相當(dāng)?shù)模旱氖?/p>

16、入水平是相當(dāng)?shù)模?E (Y1c ) = E (Y0c ) “不大可能上大學(xué)的人如果上大學(xué)不大可能上大學(xué)的人如果上大學(xué)”的收入水平和的收入水平和“可能可能上大學(xué)也確實(shí)上了大學(xué)的人上大學(xué)也確實(shí)上了大學(xué)的人”的收入水平是相當(dāng)?shù)模旱氖杖胨绞窍喈?dāng)?shù)模?E (Y1t ) = E (Y0t ) 因果關(guān)系的本質(zhì)因果關(guān)系的本質(zhì) 因果關(guān)系本質(zhì)上是一個(gè)反事實(shí)的問(wèn)題。因果關(guān)系本質(zhì)上是一個(gè)反事實(shí)的問(wèn)題。 總期望規(guī)則就變成：總期望規(guī)則就變成： E ( Yt - Yc ) = E ( Y1t - Y1c ) ( 1 q ) + E ( Y0t - Y0c ) q = E ( Y1t Y0c ) ( 1 q ) + E (

17、 Y1t - Y0c ) q = E ( Y1t Y0c ) 如果忽略了個(gè)人素質(zhì)這個(gè)變量，只是進(jìn)行簡(jiǎn)單比較，如果忽略了個(gè)人素質(zhì)這個(gè)變量，只是進(jìn)行簡(jiǎn)單比較，就會(huì)高估大學(xué)教育的回報(bào)率，犯干擾變量偏誤。就會(huì)高估大學(xué)教育的回報(bào)率，犯干擾變量偏誤。 干擾變量偏誤出現(xiàn)的條件。干擾變量偏誤出現(xiàn)的條件。28五、教育科學(xué)研究能否獲得因果關(guān)系五、教育科學(xué)研究能否獲得因果關(guān)系因果關(guān)系的具體化因果關(guān)系的具體化 教育科學(xué)不可能通過(guò)實(shí)證的方法解決反事教育科學(xué)不可能通過(guò)實(shí)證的方法解決反事實(shí)的問(wèn)題。實(shí)的問(wèn)題。 教育科學(xué)的研究對(duì)象是人或與人有關(guān)的社會(huì)現(xiàn)象、事教育科學(xué)的研究對(duì)象是人或與人有關(guān)的社會(huì)現(xiàn)象、事實(shí)，而人的生存具有時(shí)空唯

18、一性，我們不可能讓一個(gè)實(shí)，而人的生存具有時(shí)空唯一性，我們不可能讓一個(gè)人既上過(guò)大學(xué)又沒上過(guò)大學(xué)，不可能讓一個(gè)學(xué)生既是人既上過(guò)大學(xué)又沒上過(guò)大學(xué)，不可能讓一個(gè)學(xué)生既是獨(dú)生子女，又有兄弟姐妹。獨(dú)生子女，又有兄弟姐妹。 Holland(1986)提出兩種解決的方案，自然科學(xué)的解提出兩種解決的方案，自然科學(xué)的解決方案和統(tǒng)計(jì)的解決方案。決方案和統(tǒng)計(jì)的解決方案。因果關(guān)系的具體化因果關(guān)系的具體化 科學(xué)的解決方案。科學(xué)的解決方案。 重復(fù)實(shí)驗(yàn)。重復(fù)實(shí)驗(yàn)。 隨機(jī)分組。隨機(jī)分組。 科學(xué)方案的缺陷科學(xué)方案的缺陷 很難滿足反應(yīng)恒定、效應(yīng)短暫和單元同質(zhì)的假設(shè)；很難滿足反應(yīng)恒定、效應(yīng)短暫和單元同質(zhì)的假設(shè)； 外部效度的問(wèn)題。外部

19、效度的問(wèn)題。因果關(guān)系的具體化因果關(guān)系的具體化 統(tǒng)計(jì)的解決方案。統(tǒng)計(jì)的解決方案。 盡量使被試的前測(cè)特征和分組安排獨(dú)立，兩者之間盡量使被試的前測(cè)特征和分組安排獨(dú)立，兩者之間沒有關(guān)系。沒有關(guān)系。 盡可能包含影響結(jié)果的變量盡可能包含影響結(jié)果的變量 常見的統(tǒng)計(jì)方法常見的統(tǒng)計(jì)方法: 固定效應(yīng)模型固定效應(yīng)模型 ( fixed effects model ) 工具變量工具變量 ( instrumental variable ) 傾向分?jǐn)?shù)傾向分?jǐn)?shù) (propensity score ) 回歸間斷點(diǎn)回歸間斷點(diǎn) ( regression discontinuity ) 結(jié)構(gòu)方程模型結(jié)構(gòu)方程模型(structural

20、 equation model)如何運(yùn)用傾向分析：一個(gè)實(shí)例 一個(gè)分析實(shí)例：獨(dú)生子女和非獨(dú)生子女的成績(jī)是否有顯著差異？ 學(xué)生成績(jī)?cè)诔青l(xiāng)、性別、東中西部上有顯著差異，家庭社會(huì)經(jīng)濟(jì)地位的高低、家庭學(xué)習(xí)資源的多少以及學(xué)生本人的學(xué)習(xí)態(tài)度也都會(huì)影響學(xué)習(xí)成績(jī)。 在分析獨(dú)生子女和非獨(dú)生子女成績(jī)差異的時(shí)候，需要保持兩組被試在上述特征變量上的均衡。如何運(yùn)用傾向分析：一個(gè)實(shí)例 將各特征變量對(duì)分組變量做logistic回歸特征變量特征變量BS.E.WaldSig.Exp(B)城鄉(xiāng)城鄉(xiāng)128.957.000城市城市-.815.075117.117.000.443城鄉(xiāng)接合部城鄉(xiāng)接合部-.619.08750.808.000

21、.539性別性別-.929.063220.135.000.395省份省份577.253.000西部某省西部某省1.914.085512.015.0006.777中部某省中部某省.130.0713.370.0661.139家庭社會(huì)經(jīng)濟(jì)地位家庭社會(huì)經(jīng)濟(jì)地位.411.033157.447.0001.509家庭學(xué)習(xí)資源家庭學(xué)習(xí)資源-.019.00268.787.000.981學(xué)習(xí)態(tài)度學(xué)習(xí)態(tài)度.004.0031.060.3031.004截距截距-.585.3183.386.066.557如何運(yùn)用傾向分析：一個(gè)實(shí)例 分層后獨(dú)生子女組和非獨(dú)生子女組的均衡性比較傾向評(píng)分（傾向評(píng)分（MSD）按按PSPS分層分層

22、獨(dú)生子女獨(dú)生子女非獨(dú)生子女非獨(dú)生子女10.10960.02910.11630.032120.21980.03370.22770.033630.33810.03350.34470.032440.46290.03380.46640.033750.58010.03500.58390.034260.69460.03580.70260.032970.80480.03230.81260.032680.92180.02520.93310.0279分層以前分層以前0.46410.22830.73020.2060如何運(yùn)用傾向分析：一個(gè)實(shí)例 分層后獨(dú)生子女組和非獨(dú)生子女組的均衡性比較如何運(yùn)用傾向分析：一個(gè)實(shí)例 分層前，獨(dú)生子女成績(jī)顯著好于非獨(dú)生子女， F=166.048，P=0.000 分層后獨(dú)生子女組和非獨(dú)生子女組成績(jī)的比較按按PSPS分層分層獨(dú)生子女獨(dú)生子女非獨(dú)生子女非獨(dú)生子女F FSig.Sig.188.4188.4181.